Sortieren von Messwerten

[rowJoe]

Hallo Leute,

ich habe das letzte mal vor knapp 5 Jahren mit Java zu tun gehabt und möchte/muss nun ein kleineres Programm schreiben. Ich hoffe ich bin hier richtig und ihr könnt mir weiterhelfen...

In mehreren Exceldateien habe ich mehrere Tausend Messwerte von Bauteilversuchen, diese möchte ich in eine SQL-Datenbank schreiben um sie später auswerten zu können. Die Excel-Tabellen sind dabei jedes Mal gleich aufgebaut - jeder Versuch hat eine Spalte, jede Zeile einen Prüfparameter.

Wie würdet ihr an die Sache gehen um das Ganz möglichst elegant/schnell zu lösen?

Als möglichen Programmablauf habe ich mir folgenden vorgestellt:

1. Einlesen der Exceltabelle mit Apache POI
2. Abarbeiten jedes Bauteilversuchs mit einer Schleife - Zuordnung der Prüfmerkmale zu den Attributen der Klasse
3. Wenn der Einzelversuch abgearbeitet ist, werden die Daten in die SQL Datenbank geschrieben

Ich hoffe auf eure Hilfe,

Jonas

 

[Athena]

Hallo rowJoe,

dein Vorhaben ist zwar möglich, aber ich denke es gibt für dein einmaliges Problem einfachere Lösungen als mit Java. Du könntest dies beispielsweise sehr leicht mit einem VBA-Skript umsetzen.


liebe Grüße,

Athena

 

[rowJoe]

Hallo Athena,

danke für deine Antwort und den Vorschlag. Ich hatte auch schon darüber nachgedacht. Im ersten Augenblick schient es so, als sei die Datenspeicherung einmalig, das ist nicht ganz korrekt und ich hole einwenig weiter aus:

Die Datenbank und auch das Programm soll später auf Unix laufen. Auf dieses System habe ich derzeit noch keinen Zugriff - das ändert sich demnächst. Die Zeit möchte ich nutzen und ein Tool entwickeln (auf meinem WinPC), welches die Werte dann später in die Datenbank importieren kann. Die Verbindung von Unix und Win ist dann leider nicht möglich und somit fällt die Chance VBA zu nutzen leider weg (oder?). Soviel zu warum/wiso Java.

Falls du Vorschläge oder Ideen hast, bin ich sehr dankbar.


Schönes Wochenende,

rowJ

 

[Athena]

Im Falle von OpenOffice ist eine Makro-Programmierung ebenfalls möglich. Ansonsten kann natürlich auch Java genutzt werden, was ich bei regelmäßiger Nutzung dann ebenfalls bevorzugen würde, allerdings aufwendiger sein kann.

Wenn der Einzelversuch abgearbeitet ist, werden die Daten in die SQL Datenbank geschrieben

Bei mehreren Tausend Einzelversuch kann das allerdings sehr sehr sehr lange dauern, da jeder Query seine Zeit braucht. Daher lieber mehrere Datensätze gleichzeitig einpflegen (ist möglich laut MySQL 4.0.21 -> Mehrere Datensätze mit einem Insert Statement? @ Relationale Datenbanksysteme - tutorials.de: Tutorial, Forum, Anleitung & Hilfe).



Ansonsten würde ich deinen Plan noch um eine Nutzung von Threads und dem selbständigen Einlesen von Dateien erweitern. Dann könnte man beispielsweise das Programm dauerhaft aktiv und seinen eigenen Ordner ("Eingang") verwalten lassen. Wenn eine entsprechende Datei erfolgreich eingelesen wurde wird sie in den Ordner "Ausgang" verlegt. Falls etwas schief läuft könntest du die Datei in "Fehlgeschlagen" verschieben und den Fehlerbericht in einer Log-Datei sichern.

Als Nutzer braucht man nun lediglich die gewünschten Excel-Dateien in den entsprechenden Ordner verschieben.


Es gibt natürlich zahlreiche Möglichkeiten dein Problem sinnvoll zu lösen. Ich hoffe ich konnte die eine gute Alternative aufzeigen und deine Frage größtenteils beantworten.


liebe Grüße,

Athena

 

[rowJoe]

Danke für die Tipps und Ideen. So eine Art Batch-Ablauf wollte ich auch schon integrieren, jedoch erstmal die Verarbeitung von einer Datei ermöglichen. Das Einlesen mit dem Apache POI klappt schon sehr gut. Ich habe nun vor die Zellen der ersten Spalte zu vergleichen und die einzelnen Parameter so zu identifizieren.

Nun zur Frage: Besteht die Möglichkeit aus einem Objekt ein neues heraus zu erzeugen, sodass schließlich die folgende "Datenstruktur" entsteht? Hab ich eine Chance das irgendwie aufzubauen?

Objekt "Bauteil"_1
Bauteil_1.Eigenschaft_1
Bauteil_1.Eigenschaft_2
Bauteil_1.Ausleger_1.Eigenschaft_1
Bauteil_1.Ausleger_1.Eigenschaft_2
Bauteil_1.Ausleger_1.Schnitt_1.Eigenschaft_1
Bauteil_1.Ausleger_1.Schnitt_1.Eigenschaft_2
Bauteil_1.Ausleger_2.Eigenschaft_3
...
Bauteil_1.Ausleger_1000.Schnitt_200.Eigenschaft i4000


Wenn ich das "Problem" gelöst bekomme, wäre ich bestimmt einen guten Schritt weiter... In meinen Büchern und bei Google habe ich dazu (vllt auch mit den falschen Suchworten) nichts gefunden.


Vielen Dank bereits jetzt,

rowJ

 

[Athena]

Meinst du sowas wie einen Baum mit beliebiger Breite aber maximaler Höhe? Könntest du das noch einmal genauer beschreiben?

Ich bin mir nicht ganz sicher, ob ich dich richtig verstanden habe:

- Ein Bauteil hat genau zwei Eigenschaften und beliebig viele Ausleger
- Ein Ausleger hat genau zwei Eigenschaften und beliebig viele Schnitte
- Ein Schnitt hat genau zwei Eigenschaften.

In diesem Fall könnte eine Auslegerklasse zum Beispiel so aussehen:

import java.util.ArrayList;
import java.util.List;

public class Ausleger {

	private Eigenschaft e1;
	private Eigenschaft e2;

	private List<Schnitt> schnitt; // Stichwort generische Klassen und ArrayList

	public Ausleger(Eigenschaft e1, Eigenschaft e2) {
		this.e1 = e1;
		this.e2 = e2;
		this.schnitt = new ArrayList<Schnitt>();
	}

	public void addSchnitt(Schnitt s) {
		schnitt.add(s);
	}

}

liebe Grüße

Athena

 

[rowJoe]

Guten Morgen Athena,

ich bin mir nicht ganz sicher, was du mit dem "Baum" meinst...

Meinst du sowas wie einen Baum mit beliebiger Breite aber maximaler Höhe? Könntest du das noch einmal genauer beschreiben?

Ich beschreibe am besten nochmal die Struktur in der die Daten vorliegen:
- es gibt mehrere Bauteile, die vermessen werden
- zwei Prüfgrößen können direkt dem Bauteil zugeordnet werden
- jedes dieser Bauteile kann (muss aber nicht zwangsläufig) mehrere "Ausleger" (genau definierte Bauteilbereiche) haben
- jeder "Ausleger" besitzt genau definierte Prüfparameter (in diesem Fall 2)
- diese "Ausleger" sind wiederum in genau definierte Schnitte geordnet
- an diesen Schnitten sind ebenfalls Prüfmerkmale untersucht worden

Ich möchte also ein Objekt "Bauteil erzeugen", welches mehrere "Unterobjekte" erzeugen kann (Ausleger). Diese sollten wiederum diese so genannten "Unterobjekte" (Schnitte) erzeugen können.

Kann man das überhaupt so realisieren oder ist das gar nicht möglich?



Vielen Dank für deine Hilfe.

 

[Athena]

Hi rowJoe,

das entspricht doch in etwa dem Beispielquelltext von mir.
Dein Stichwort ist Arraylisten.

liebe Grüße,

Athena

 

[Natac]

Hast du überlegt, die Excel-Datei möglicherweise als CSV-Datei zu exportieren und diese in deine Datenbank zu importieren (falls deine DB das anbietet). Scheint mir viel einfacher zu sein als ein Programm dafür zu schreiben.

 

[rowJoe]

Hallo Athena,

danke noch mal für deine Hilfe. Ich habe mir eben noch mal dein Beispiel angesehen und es vielleicht nicht auf Anhieb verstanden, daher einige Rückfragen:

a) Du erstellst eine Klasse "Ausleger", in welcher mittels ArrayList die Schnitte erzeugt werden, sind die Eigenschaften e1 und e2 die Eigenschaften des Auslegers oder des Schnittes?

b) Das Bauteil hast du in deinem Beispiel nicht mit drin. Weil es nicht erforderlich ist oder zur Vereinfachung? Nach deinem Beispiel würde ich nun drei Klassen erstellen (Bauteil, Ausleger, Schnitt) deren Objekte jeweils mittels ArrayList erstellt werden. Hab ich das so richtig verstanden?


Viele Grüße

rowJ

 

[Athena]

Hey rowJoe,

a) Die Eigenschaften e1 und e2 gehören hier zu Ausleger.

b) Genau ich habe nur eine Klasse Ausleger angegeben, da die jeweils anderen Klassen genauso aufgebaut sind. Sprich jeweils zwei Eigenschaften und eine Arrayliste, welche auf deine "Unterobjekte" verweist. Die Klasse Schnitt hat natürlich nur noch zwei Eigenschaften, aber keine Arrayliste mehr.


Anhand deiner Antworten merke ich, dass dir einiges an Erfahrung fehlt. Wenn du magst gebe ich dir meine privaten Teamspeak-Daten, um deine Fragen schneller klären zu können.


liebe Grüße,

Athena

 

[rowJoe]

Hallo Athena,

das wäre natürlich extrem genial. Schickst du mir eine PN?



Lieben Dank,

rowJ