Optimale Datenstrukturen und Dateiformate
Bei Projekten, in denen große Mengen an Daten zu erwarten sind, sollte man sich schon gleich zu Beginn Gedanken über die Art der Speicherung machen. Datenbanken und existierende Dateiformate können in einigen Fällen eine gute Lösung sein, aber meist ist ein auf das Problem zugeschnittenes und optimiertes Dateiformat die bessere Wahl.
Dadurch werden Overhead durch nicht genutzte Funktionalitäten und Kompromisse und Workarounds wegen nicht vorhandener Funktionalitäten vermieden. Das Dateiformat und die Datenstrukturen im Hauptspeicher können platzsparend und auf schnellen Zugriff ausgelegt werden.
Kontakt
Für Beratung bei Big Data Projekten, Entwickeln individueller Dateiformate mitsamt effizienten Lese- und Schreibroutinen und generellen Anfragen steht 256.systems zur Verfügung.