Image oder GridControl?

[bladepit]

Hallo zusammen,

ich habe ein technologisches Problem und hoffe ihr könnt mir weiter helfen.

Also ich bin grade an einem Projekt welches eine Heatmap darstellen muss. Dazu habe ich ein Control übernommen was selber geschrieben wurde von einem vorherigen Mitarbeiter.

Die Heatmap soll 10000 * 500 Punkte darstellen können. Das ist ne ganze Menge und schwer zu realisieren. Mein Speicher läuft akutell bei 2000 * 500 schon über. Aber ich glaube das Problem identifiziert zu haben.

In der Heatmap wird für jeden Punkt (Kachel) ein Image generiert und gespeichert. Wie groß sind die Images im Speicher? Das dürfte denk ich mal mein Speicherfresser sein.

Gibt es für Java denn sowas wie GridControl oder ähnliches mit dem ich die Map besser darstellen könnte.

Habt ihr schonmal Heatmaps dargestellt und wenn ja womit?

Gruß

bladepit

 

[Michael...]

In der Heatmap wird für jeden Punkt (Kachel) ein Image generiert und gespeichert. Wie groß sind die Images im Speicher? Das dürfte denk ich mal mein Speicherfresser sein.

Wenn das so ist, ist das sicherlich ein Fehler und die Ursache des Speicherproblems.
Wieviele Zustände kann denn so ein Punkt annehmen? Sicherlich keine 5 Mio. Es sollten nur soviele Bilder erzeugt/geladen werden, wie für die Darstellung der unterschiedlichen Zustände notwendig sind.

Wenn man die Zustände der Kacheln in einem byte bzw. int Array verwaltet kommt man auf einen Speicherbedarf von 5 bzw. 20 MB plus 100 (angenommene) unterschiedliche Zustände die durch 100 unterschiedliche Bilder (vermutlich etwas überdimensionierte Abschätzung 1MB pro Bild) repräsentiert werden ==> ergibt 120 MB (wobei ein Kachelbild vermutlich nur wenige KB groß sein dürfte)

 

[bladepit]

Ja es gibt zwei Werte die durch die Heatmap repräsentiert werden sollen. Und da gibt es vll maximal 300 Zustände. Wenn man die Zustände so definiert das diese sich unterscheiden mit Zahl und Farbe. Wenn man nur Farbe nehmen würde dann sind das nochmal weniger Zustände.

Aber ich könnte dann trotzdem ein Image generieren oder? Problem ist halt das ich nicht das ganze umschreiben will. Die Arbeit sich da rein zu denken war schon extrem hoch ohne Kommentare...:-(

 

[Michael...]

Aber ich könnte dann trotzdem ein Image generieren oder?

Dageben spricht nichts. Nur sollte man zur Repräsentation eines gleichen Zustands ein eventuell existierendes Image wiederbenutzen.

 

[bladepit]

Hallo,

ich hab dadurch den Speicher was drücken können aber nicht genug. Bei einer 340 * 349 Heatmap hab ich dann 118660 Punkte. Jedes davon ist dann ja immer noch ein Image welches referenziert wird.

Nun ist meine Map auch ein JComponent und ich nutze die paintComponent Methode um die Punkte zu zeichnen.

Gibt es denn vll eine andere bessere Lösung als ein JComponent und dies selber zu zeichnen? Vll ein anderes Control etc?

Gruß

bladepit

 

[Michael...]

Jedes davon ist dann ja immer noch ein Image welches referenziert wird.

Hoffentlich referenzieren diese 118660 Punkte nicht auf 118660 Image Objekte.

Nun ist meine Map auch ein JComponent und ich nutze die paintComponent Methode um die Punkte zu zeichnen.

Gibt es denn vll eine andere bessere Lösung als ein JComponent und dies selber zu zeichnen? Vll ein anderes Control etc?

Hangt davon ab, wie der Prozess ausschaut und wie oft wie viele Daten aktualisiert werden. Eventuell wäre es besser diese "HeatMap" auf ein BufferedImage zu zeichnen und auf der Komponente nur diese Bild anzuzeigen.

 

[bladepit]

Ok....

Ich hab grade JHeatChart gefunden. Das macht ein BufferedImage. Da bleibt ich bei ner bestimmten Größe der Kacheln auch bei 10000 * 400 unter 1 GB aber das braucht einfach mal 15 min.

Ich weiß nicht ob das wirklich die Lösung ist. Ich würde es nehmen wenn es nur eine Minute brauchen würde aber das ist ein Traum.

Leider gibt mir unser Auftraggeber genau sowas vor.

Mittels JOGL (mit dem ich 0 Erfahrungen hab) das selber zu zeichnen ist doch auch blödsinn oder?

 

[bERt0r]

Ist es nicht so dass bei einer Heatmap die Farbe der einzelnen "Kacheln" durch ihren Wert bestimmt wird? Ein Image für jede solche Kachel zu generieren ist doch unnötig, wenn dann interessiert dich doch nur das Bild der gesammten Heatmap nicht eines von einzelnen Kacheln. Bei der Menge an "Kacheln" sollte man diese am besten einfach als double Wert ausdrücken, kein Objekt drumherumschreiben wenns nicht unbedingt nötig ist.

Wenn du jetzt irgendwelche vordefinierte Bilder hast, und dann z.B eine Kachel mit Wert 0 durch einen Smiley darstellen willst, solltest du vorher alle Bilder in eine Collection z.b HashMap oder ArrayList laden und dann, wenn du diese Kachel bearbeitest, das Bild aus der Collection holen.

 

[Michael...]

15 min sind ganz schön lange, da lässt sich sicherlich noch was optimieren ;-)
Ich habe jetzt mal nachgeschaut was eine Heatmap überhaupt ist. Bei den Bildern, die ich gesehen habe wird ja nur das Bild einer Website farblich überlagert. Müssen diese Kacheln denn tatsächlich Images sein oder kann man nicht einfach die Pixel des Bildes entsprechend der Werte einfärben?
Bei meinen Test habe ich ein BufferedImage 500x10000 anhand von 5 Mio Zufallswerten pixelweise eingefärbt. Hat nur ein paar Sekunden gedauert.