Du kannst es entweder mit Javascript oder mit CSS machen. (Javascript könnte deaktiviert sein, ist aber einfacher)
Mit Javascript würdest du IIRC in OnMouseOver (oder so) einfach mit this.src = 'http://...' Das Bild wechseln
Mit CSS müstest du für den IE6 den Link als Blockelement mit Hintergrundgrafik definieren und könnest dann mit der Pseudoklasse a:hover und background-image das Bild wechseln
(siehe einen Post unter mir ...)
Ich mag lieber CSS
@mirage: Zu spät