ボタンの方を文字なしで飾りとして使うならそのまま使ってくださって結構です。 しかし、リンクボタンとして使うなら、文字があった方が当然分かりやすいです。 バナーの所で紹介したサイトを使ってももちろんOK あと私が時々やるのは、テーブルを使っての表示です。
下に、文字が文字のタイプと、文字が画像タイプの2種類用意してるので よかったら、参考にしてみてください。