BufferedReader problem

[Slava]

wenn ich über BufferedReader(new FileReader(new File(filename)))
eine 750 mb Datei öfne und erste 200 Zeilen mit readLine() auslesen und in eine Andere Datei schreiben
versuche!!!!
kann ich loker 2 Zigareten rauchen (ungefehr 11 Minuten)bis der Ergebnis kommt. :?:

Ich vermute das die datei nicht derekt zeilenweise gelesen wird sondern wird mit grossen schtücken gepuffert.

Kann mir bitte jemand schnelere Methode zum zeilenwiese-auslesen empfehlen???
Danke

 

[thE_29]

Bei so großen Dingern würde ich einfach den InputStreamReader und InputStreamWriter nehmen...

Der hat zwar kein Zeilenweises auslesen, funktioniert dafür aber!

 

[Bleiglanz]

könnte dran liegen, dass der FileReader schon gebuffert ist - lass mal den BufferedReader einfach weg!?

trotzdem wundert mich das - poste mal etwas Code

 

[L-ectron-X]

Wenn die Zeilen ellenlang sind, kann ich mir das schon vorstellen.

 

[Bleiglanz]

stimmt

das müssten aber RIESIEGE Zeilen sein wenn das 11 Minuten dauert

 

[thE_29]

HDR Trilogie in einem Absatz

 

[Bleiglanz]

wenn ich so drüber nachdenke dann ist das wahrscheinlich keine Textdatei

750MB Text?????

wahrscheinlich ein binary, und die ersten 200 bytes die \r \n sind eben weit verstreut...

 

[Slava]

erst mal danke für hilfe!

Das ist wirklich eine text datei mit zeilen-länge maximal 120 zeichen durch "\t" getrennt.
Es handelt sich um eine unicode datei mit allen Städten der Welt mit koordinaten (KRÜGER, und UTM).
Meine idee war diese datei mit java in kleinere Stücke zerlegen (ungefehr 700 kb) und gleichzeitig in sql code zu verwandeln "insert into Tabelle ".
Ich brauche das um maein MYsql datenbank mit kleinen portionen zu füllen, damit ich die abstände zwischen städten berechnen kann.
Eigentlich Ihr könnt das auch machen die datei ist ofentlich http://earth-info.nga.mil/gns/html/cntry_files.html

 

[Guest]

Schau Dir java.util.Scanner an.

 

[Bleiglanz]

hm, du musst also mehr als 6Millionen INSERTS machen, ich würde immer nur eine Zeile lesen und die dann inserten

ggf mit offset arbeiten, also <skip> zeilen überspringen und dann <num> zeilen lesen und jede sofort mit INSERT einfügen (nette kleine Funktion), damit du "blockweise" arbeiten kannst wenns mal abschmiert...

 

[Slava]

entschuldigung!!!
Problem gelöst
5800000 zeilen in 17 minuten in datenbank eingefügt

noch mal Danke an alle

 

[Mag1c]

Hi,

schade, wollte dir gerade FileChannel und MappedByteBuffer aus dem Package java.nio vorschlagen.
Na egal, wenn es schon geklappt hat

Gruß
Mag1c