Schau dir die Eigenschaft
Mask an. Da kannst du deine Dateiendungen angeben. Beispiel:
*.dcu;*.pas
Edit: Ich glaube, ich habe dich falsch verstanden. Was möchtest du genau? Nicht die Dateien im Projektordner auflisten, sondern die in einem bestimmten Ordner?

Edit 2: Du kannst eine DirectoryListBox mit der FileListBox verknüpfen, um andere Verzeichnisinhalte auflisten zu lassen.