Performance bei riesigen, mehrdimensionalen Arrays

Diskutiere Performance bei riesigen, mehrdimensionalen Arrays im Scriptsprachen Forum; Moin, für eine Datenanalysen werden regelmäßig einige 100.000 Datensätze aus verschiedenen Quellen bezogen und nach kurzer Analyse in einem Array...

  1. Anfänger2011
    Anfänger2011 Mitglied
    Moin,

    für eine Datenanalysen werden regelmäßig einige 100.000 Datensätze aus verschiedenen Quellen bezogen und nach kurzer Analyse in einem Array zwischengespeichert bevor die eigentlichen Rechenprozesse beginnen.

    Meine Frage ist jetzt, ob es performancetechnisch einen Unterschied machen würde das Array in kleinere, einzelne Arrays zu packen, die in einer relevanten Spalte die selben Werte besitzen?
     
  2. Vielleicht hilft dir dieser Java-Kurs hier weiter --> (hier klicken)
  3. Flown
    Flown Administrator Mitarbeiter
    Implementieren und Benchmark ausführen. Schnellere Variante nehmen.
     
    Anfänger2011 gefällt das.
  4. Anfänger2011
    Anfänger2011 Mitglied
    Simple aber gut deine Idee. Da ich beim Hoster kein Benchmarktool habe,habe ich einfach den Zeitstempel vor und nach der Operation verglichen und ein verschiedene Größen an Datensätze ausprobiert.

    Ab ca. 25.000 dauert es 0,1sec länger. Bei 630.000 Datensätzen sind es schon 4,3sec mehr, wenn man das ganze in ein Array packt :)
     
Die Seite wird geladen...

Performance bei riesigen, mehrdimensionalen Arrays - Ähnliche Themen

VideoPlayer: Xuggler seekkeyframe extrem schlechte Performance..
VideoPlayer: Xuggler seekkeyframe extrem schlechte Performance.. im Forum Spiele- und Multimedia-Programmierung
Performance für Tomcat / Apache optimieren
Performance für Tomcat / Apache optimieren im Forum Allgemeine Java-Themen
JavaFX ListCell Performance
JavaFX ListCell Performance im Forum AWT, Swing, JavaFX & SWT
Performance Loop vs Streams
Performance Loop vs Streams im Forum Plauderecke
Miserable Performance beim Ändern der Hintergrundfarbe von JLabels
Miserable Performance beim Ändern der Hintergrundfarbe von JLabels im Forum AWT, Swing, JavaFX & SWT
Thema: Performance bei riesigen, mehrdimensionalen Arrays