Ein Leerzeichen als Caption und schon ist die Caption nicht mehr leer.
Hatte früher mal Probleme mit Panels und deren leerer Captions. 
Das Bild verschiebt sich dann trotzdem minimal...
Übrigens scheint der TSpeedbutton im Gegensatz zum TToolButton (der aber afaik leider eben nur in einer Toolbar funktioniert) ein Problem mit einer ColorDepth von cd32Bit zu haben (zumindest bei mir, Icon in Toolbar super, Icon in Speedbutton mit hässlichem Rand)