Umgang mit großen Datenmengen?

[bono_82]

Hallo,

ich habe eine Aufgabe zur Visualisierung und weitergehenden Brechnung von Messwerten
eine Software zu programmieren. Die Hauptschwierigkeit liegt darin, dass es sich um sehr
viele Werte handelt (bis zu 10000 Werte pro Sekunde können auftreten). Dementsprechend muss man
eventuell mit bis zu 2 GB Daten arbeiten.
Die Daten sind in Binärform auf einer SD-Karte vorhanden.

Nun meine Frage:
Was gibts es prinzipiell für Möglichkeiten um so große Datenmengen zu handeln (Visualisierung, Berechnungen)?
Ich habe mich schon etwas über MemoryMapping informiert. Geht das in die richtige Richtung?
Welche Techniken wären sonst noch empfehlenswert (Fensterung... etc.).

Beste Grüße!