ListBox - Selection verhindern

[moelski]

Moin !

Ich habe da eine ListBox (genaugenommen eine TChartListBox - aber das ist mal egal) bei der ich ein MouseDown Event hinterlegt habe. Weiterhin ist Multiselect aktiviert. Ich benutze das MouseDown Event um eine Drag & Drop Aktion zu starten.

Nun selektiert aber die ListBox schon beim drücken der Maustaste (Mouse Down) einen Eintrag. Wenn ich dann eine Drag & Drop Aktion starten will, dann wird eine Multiselektion wieder verworfen und nur das eine Element unter der Maus ist selektiert.
Kann man dieses Verhalten irgendwie abklemmen? Also gibt es einen Weg das ich mich um die Selektion selber kümmere?