Website Quelltext mit Java einlesen

[MrVulcon]

Moin,

bevor man mich jetzt darauf hinweist, dass es schon andere Themen gibt, die den Quellcode einlesen können dann kann ich jetzt sagen, dass dies nicht mein Ziel ist.

Ich spiele DS und möchte, dass mein Java-Programm den Quelltext (nicht den Quellcode) einliest.
Im Quellcode stehen nähmlich nicht die Informationen, welche ich suche.

Wenn ich mit Firefox die "die Stämme" Seite aufrufe und dann rechtsklick mache, kann ich mir den Seitenquelltext anzeigen lassen.
In diesem Quelltext steht die Information die ich brauche.

Jedoch funktioniert eine normale URL einlese hier nicht.
Der Link sieht so aus. Hilft euch das weiter?:
view-source:https://de183.die-staemme.de/game.php

Gibt es die Möglichkeit diesen Quelltext direkt auszulesen oder gibt es die Möglichkeit, den Seiteninhalt dieses Quelltextes direkt zu kopieren?

Danke im vorraus,
Mfg
Joshua

 

[BestGoalkeeper]

Ich glaube, es wird dir keiner einen Bot schreiben. Nach welcher Information suchst du?

 

[MrVulcon]

Ich glaube, es wird dir keiner einen Bot schreiben. Nach welcher Information suchst du?

Ich möchte keinen Bot, sondern wissen, wie ich an den Quelltext komme.
Die Informationen sind die Truppen (Int Werte) in meinem Dorf, damit ich die Raubzüge ausrechnen kann, ohne dass ich die Truppen einzeln eingeben muss

 

[BestGoalkeeper]

Mach mal einen Screenshot vom Quelltext, ich bin mir nicht sicher welches Browsertool du meinst (Quelltext anzeigen, und Quelltext untersuchen sind nämlich zwei Paar Schuhe).

 

[MrVulcon]

Anhang anzeigen 14056

 

[MrVulcon]

Mach mal einen Screenshot vom Quelltext, ich bin mir nicht sicher welches Browsertool du meinst (Quelltext anzeigen, und Quelltext untersuchen sind nämlich zwei Paar Schuhe).

 

[MrVulcon]

Anhang anzeigen 14056

Ich möchte nur die wichtigen Infos raussuchen.
Ob ich den Quelltext erst einlese und die Infos dann raussuche oder ob ich Sie raussuche und dann die Gefundenen Werte einlese ist mir egal.

Mir geht es nur darum, dass ich irgendwie Java dazu bringen möchte, an den Quelltext zu kommen, ohne dass ich ihn kopieren und in eine txt einfügen muss

 

[BestGoalkeeper]

Wie du siehst, gibt es auf der Seite viel JavaScript, dass heißt, du musst nicht nur den Quelltext beziehen, sondern diesen unter Umständen auch parsen...

 

[BestGoalkeeper]

Hab mir mal die Anfrage-Cookies angesehen:


und ich konnte die Anfrage nicht unmittelbar nachstellen, da zum Beispiel cid und io dynamisch generiert werden. Das heißt, das wird ohne eine Bibliothek nicht einfach werden.

 

[M.L.]

So etwas nennt man "Web Scraping" und dafür gibt es z.B. Selenium und JSoup: Link (man beachte auch den potentiellen Nachteil von JSoup, der auch i.Z. mit Java gelten dürfte)

 

[BestGoalkeeper]

Man ist mit JSoup und einem Bot schreiben halt nicht immer auf der sicheren Seite. 😉 Schlimmstenfalls wirste gesperrt.