* Panel ohne Ramen drumrum und das auf Enabled
* oder das Memo ableiten und die Scroll-Messages abfangen und an die Scrollbar durchreichen
* oder eventuell kannst du im OnMouseDown der Edits mit 
ReleaseCapture und SetCapture die Behandlung von Sender.Handle/GetFocus an ScrollBox.Handle übergeben (bei
VCL)