Webbot in Java?

[freedoomfighter]

Hallo

Ich habe vor ein Programm zu schreiben, welches auf mehrere Webseiten einlogen und bestimmte Texte rauskopieren muss. Diese werden dann sortiert und in eine Datenbank abgelegt. Es muss auch möglich sein bestimmte Datensätze per Netzwerk einzugeben.

Die Datensätze müssen am ende in einer Übesichtlichen Form angezeigt werden.

Ist Java für diese Aufgabe besser geeignet, als andere Programmiersprachen? (C++ z.B)

Und gibt es vielleicht schon ähnliche Programme die so eine Funktion haben?

 

[ARadauer]

Ist Java für diese Aufgabe besser geeignet, als andere Programmiersprachen? (C++ z.B)

auf jeden Fall

Und gibt es vielleicht schon ähnliche Programme die so eine Funktion haben?

Sowas nennt man Webcrawler.
Das Webapp Test Framework Selenium könnte dir da auch ganz hilfreich sein.... Einloggen, Texte rauskopieren... geht damit sehr einfach, wenn man sich mal eingearbeitet hat....

 

[pathfinder01]

Die HTMLParser API/Framework ist sehr empfehlenswert. Er enthält auch eine UI mit denen man Regeln definieren kann, wie genaue Informationen aus einer Webseite extrahiert werden können. Aus den grafischen Regeln generiert die UI Java Klassen, welche du in deinen Code einbauen kannst.

Hier findest du ein einfaches aber verständliches Beispiel HTML Parser Beispiel.

 

[Dissi]

Kann HTMLUnit empfehlen.