Programm, dass alle 3 Tage eine Webseite öffnet?

[berndoa]

Hallo,
ich habe ein, für meine Verhältnisse, großes Projekt vor.
Und zwar will ich das Folgendes passiert:
Es wird ein browser geöffnet (welcher weiß ich noch nicht genau).
Es wird eine bestimmte Seite aufgerufen.

Auf der Seite wird mit Dom Manipulationen ne Stunde lang gewerkelt und getan.
Insbesondere wird aus einer excel datei auf dem computer bestimmte Werte ausgelesen und
anhand der Werte aus der Tabelle dort werden bestimmte Aktivitäten auf und mit der Webseite gemacht.
Wie gesagt ne Stunde lang.
Nach der Stunde wird browser mitsamt Seite geschlossen.

Dann ca. 3 Tage Pause.

Dann ghets von vorne los. Und das so in Endlosschleife

Hierzu hätte ich gerne ein programm


Vorab, ich weiß aus anderen Foren dass Windows irgendeinen Scheduler hat.
Problem ist nur dass ich alle Aktivitäten möglichst "zufällig" lang machen will.
Also dass bspw. nicht immer genau 3 Tage gewartet wird, sondern das eine mal 2,76 Tage, beim Nächsten mal 3,24 Tage.
Das ist ja mit dem Scheduler, der feste zeiten will, nicht mahcbar.
Gleichermassen sind es auch nicht genau 1 Stunde auf der Seite sondern mal 37 Minuten, das Andere mal 58 Minuten.
Nur eben maximal 1 Stunde.

Halt alles von der länge her etwas pseudozufälklig gestaltet.

Wobei die "Berechnung" einer "zufälligen" Zeitspanne nicht das Problem ist.

Wo ich so meine Probleme sehe:
1. wie baue ich überhaupt ein Programm das alle ca. 3 Tage was bestimmtes tut?
Hier würde ich in die Richtung denken, die Zeit der aktuellen Sitzung abzuspeichern (wobei alle Zeiten in "Sekunden seit 1.1.1970" oder so gespeichert werden, also rein als Sekundenanzahl) und einfach so ab und zu gecheckt wird ob schon das 3 Tage äquivalent in sekunden vergangen ist.
Oder ein entsprechender wait befehel, der das skript 3 tage lang pausiert. falls es sowas gibt.
Wobei ich ja eigentlich kein fan davon bin dass das skript 3 tage lang zwar an ist aber nur schlummernd irgendwo rumsitzt.
ein ungeplanter computerneustart könnte es je nachdem ruinieren.

Wobei natürlich sinnvoll wäre, den letzten sitzungszeitpunkt extern in ner textdatei oder so zu speichern.
damit, selbst wnen das skript mal abstürzt, solche daten schnell wieder eingelesen werden können.

2. wie liest man eigentlich aus einer excel (ganz genau genommen: einem openoffice calc dokument) daten aus?

3. javascript kann dom manipulationen super, das weiß ich.
Aber wie macht mans mit einem "externen" java programm, also wo jetzt nciht wie javascript einfach in der browserinternene konsole
laufen gelassen wird?

Kann java eigentlich auch ocr? also von einer webseite rein optisch text auf farbigem hintergrund auslesen?
ist nichts handschriftliches oder so, sondern text in nem Maschinenfont (Arial oder sowas, keine ahnung),
was abgelesen werden müsste.



Da sehe ich so meine 3 Kernprobleme, zu denen ich gerade noch keinerlei Ahnung habe wie man sie umsetzt und ob das überhaupt mit Java so geht :-/
Theoretisch würde meine Zwecke wohl auch ein tampermonkey javascript skript tun (von der dom sache her) aber da Daten von einer browser externen datei einzulesen geht sicherlich nicht.
und daten in eine externe datei schreiben geht auch nicht.

Insofern werde ich wohl um ein richtiges java programm nicht drum herum kommen :-/

 

[Robert Zenz]

1. wie baue ich überhaupt ein Programm das alle ca. 3 Tage was bestimmtes tut?

Mit einem Scheduler. Quartz wird eher uebertrieben sein dafuer, also eher eine Schleife welche zum Beispiel eine Minute schlaeft und dann prueft ob der Zeitpunkt gekommen ist, ganz simpel.

Hier würde ich in die Richtung denken, die Zeit der aktuellen Sitzung abzuspeichern (wobei alle Zeiten in "Sekunden seit 1.1.1970" oder so gespeichert werden, also rein als Sekundenanzahl) und einfach so ab und zu gecheckt wird ob schon das 3 Tage äquivalent in sekunden vergangen ist.
Oder ein entsprechender wait befehel, der das skript 3 tage lang pausiert. falls es sowas gibt.

Nein, mach' es bitte gleich richtig und speichere die letzte Ausfuehrung als ISO-8601 mit Zeitzone, und verwende dann in Java OffsetDateTime.

2. wie liest man eigentlich aus einer excel (ganz genau genommen: einem openoffice calc dokument) daten aus?

Mit Schwierigkeiten. Apache POI oder aehnliche Projekte werden deine beste Chance sein, wenn du nicht gerade die Excel-Dateien vorher in ein CSV wandeln willst.

3. javascript kann dom manipulationen super, das weiß ich.
Aber wie macht mans mit einem "externen" java programm, also wo jetzt nciht wie javascript einfach in der browserinternene konsole
laufen gelassen wird?

Gar nicht, das ist der Witz an der Sache, oder zumindest nicht so wie du glaubst. Das Naeheste wird Selenium WebDriver sein, damit kann man sich einen Browser starten in welchem dann das Selenium Framework Kommandos ausfuehrt. Damit kann man eigentlich so ziemlich alles automatisieren, soweit ich weisz.

Kann java eigentlich auch ocr?

Das ist in etwa so als wuerdest du fragen ob Elektromotoren auch Landstrassen koennen...die Antwort ist "Klar, wenn sie in einem Gelaendewagen stecken". Es gibt viele Bibliotheken fuer Java fuer OCR. Ich rate jetzt mal und denke deine Frage geht auf CAPTCHAs oder etwas vergleichbares geht, dann ist die Antwort "vielleicht", aber wahrscheinlich eher nicht. Da muesstest du schon eine spezielle Bibliothek finden welche genau darauf abzielt.

 

[berndoa]

Mit einem Scheduler. Quartz wird eher uebertrieben sein dafuer, also eher eine Schleife welche zum Beispiel eine Minute schlaeft und dann prueft ob der Zeitpunkt gekommen ist, ganz simpel.


Nein, mach' es bitte gleich richtig und speichere die letzte Ausfuehrung als ISO-8601 mit Zeitzone, und verwende dann in Java OffsetDateTime.


Mit Schwierigkeiten. Apache POI oder aehnliche Projekte werden deine beste Chance sein, wenn du nicht gerade die Excel-Dateien vorher in ein CSV wandeln willst.


Gar nicht, das ist der Witz an der Sache, oder zumindest nicht so wie du glaubst. Das Naeheste wird Selenium WebDriver sein, damit kann man sich einen Browser starten in welchem dann das Selenium Framework Kommandos ausfuehrt. Damit kann man eigentlich so ziemlich alles automatisieren, soweit ich weisz.


Das ist in etwa so als wuerdest du fragen ob Elektromotoren auch Landstrassen koennen...die Antwort ist "Klar, wenn sie in einem Gelaendewagen stecken". Es gibt viele Bibliotheken fuer Java fuer OCR. Ich rate jetzt mal und denke deine Frage geht auf CAPTCHAs oder etwas vergleichbares geht, dann ist die Antwort "vielleicht", aber wahrscheinlich eher nicht. Da muesstest du schon eine spezielle Bibliothek finden welche genau darauf abzielt.

"wenn du nicht gerade die Excel-Dateien vorher in ein CSV wandeln willst."
Das dürfte (hoffentlich) nicht das Problem sein.
Ich meine, die Daten der Exceldatei werden sich nicht ändern.
Insofern kann ich die auch locker in ein anderes Dateiformat umwandeln wenns was bringt (wobei ich googeln müsste wie es geht)


Okay, von selenium habe ich sowas von gar keinen Plan.

Was braucht man für sowas oder wo kann ich mich da ein wenig einlesen?


"..denke deine Frage geht auf CAPTCHAs oder etwas vergleichbares geht"

Ne, sowas Kompliziertes ist es nich mal.
Geht mehr um Roulette, wo ich , je nachdem was einfacher ist, über Dom Struktur auslesen oder eben ocr auslesen bspw. ablesen will welche 5 zahlen als Letztes getroffen wurden (oder welche Farben in den letzten 5 Runden getroffen wurden), wie hoch der Kontostand ist, usw. so kram .
Weiß nicht was da einfacher ist, ob nun das mit ocr "visuell" abzulesen oder irgendwie über dom manipulationen oder so.

Wobei, wenn ich so überlege, mir beim Einloggen ja captchas begegnen könnten um die ich mich kümmern müsste irgendwie...

gleichermassen will ich sowas wie "setze 5 mal 10 cent auf rot" mittels dom manipulationen automatisieren.



Edit:
Bezüglich Datum hätte ich halt gedacht dass das mit den Sekunden am Einfachsten wäre weil ich mir über Schaltjahre, untershcieldich lange Monate und Co. keine Gedanken machen muss.
Weil 3 Tage Dauer eben immer 3*24*60*60 Sekunden hat. oder das 1000 fache davon an Millisekunden.

 

[Robert Zenz]

Okay, von selenium habe ich sowas von gar keinen Plan.

Was braucht man für sowas oder wo kann ich mich da ein wenig einlesen?

Auf deren Seite direkt, wird nicht viel besser.

Ne, sowas Kompliziertes ist es nich mal.
Geht mehr um Roulette, wo ich , je nachdem was einfacher ist, über Dom Struktur auslesen oder eben ocr auslesen bspw. ablesen will welche 5 zahlen als Letztes getroffen wurden (oder welche Farben in den letzten 5 Runden getroffen wurden), wie hoch der Kontostand ist, usw. so kram .
Weiß nicht was da einfacher ist, ob nun das mit ocr "visuell" abzulesen oder irgendwie über dom manipulationen oder so.

Die werden vermutlich irgendwo im DOM oder als Netzwerkverkehr herumliegen, ja. Eine andere Sache, falls das ein "richtiges" Kasino ist, lies dir lieber die AGB durch ob die Bots erlauben, wahrscheinlich naemlich nicht. In der selben Schiene, vielleicht haben die eine API die du stattdessen verwenden kannst, ohne dass du ueber die Webseite musst.

Bezüglich Datum hätte ich halt gedacht dass das mit den Sekunden am Einfachsten wäre weil ich mir über Schaltjahre, untershcieldich lange Monate und Co. keine Gedanken machen muss.
Weil 3 Tage Dauer eben immer 3*24*60*60 Sekunden hat. oder das 1000 fache davon an Millisekunden.

Die neue Java Date/Time API ist sehr gut, jedes OffsetDateTime zeigt auf einen eindeutigen Timepoint, wenn du die vergleichst bekommst du genau den Wert den du willst.

 

[mihe7]

Vorab, ich weiß aus anderen Foren dass Windows irgendeinen Scheduler hat.
Problem ist nur dass ich alle Aktivitäten möglichst "zufällig" lang machen will.

BTW: Ich meine, in Windows gäbe es die Möglichkeit, die Ausführung für eine zufällige Anzahl an Minuten zu verschieben.

 

[kneitzel]

BTW: Ich meine, in Windows gäbe es die Möglichkeit, die Ausführung für eine zufällige Anzahl an Minuten zu verschieben.

ja genau! Der Windows Scheduler hat die Option, dass eine Ausführung für einen zufälligen Zeitraum (begrenzt mit einem Maximum) verzögert werden kann.
In der "Trigger" Einstellung in der Deutschen UI ist das der Punkt "Aufgabe verzögern für maximal " [Auswahl] der sich bei dem Zeitplan Trigger findet.

 

[berndoa]

ja genau! Der Windows Scheduler hat die Option, dass eine Ausführung für einen zufälligen Zeitraum (begrenzt mit einem Maximum) verzögert werden kann.
In der "Trigger" Einstellung in der Deutschen UI ist das der Punkt "Aufgabe verzögern für maximal " [Auswahl] der sich bei dem Zeitplan Trigger findet.

Müsste ich mal gucken, gibts dort auch ein "Minimum" Feld?

 

[kneitzel]

Nein, macht ja auch keinen Sinn:

Wenn du sagst Zeitpunkt x mit Verzögerung von a-b Minuten, dann ist es ja wie Zeitpunkt x+a mit Verzögerung b-a

 

[berndoa]

D

Nein, macht ja auch keinen Sinn:

Wenn du sagst Zeitpunkt x mit Verzögerung von a-b Minuten, dann ist es ja wie Zeitpunkt x+a mit Verzögerung b-a

Dann habe ich dich da missverstanden.
Aus dem "Aufgabe verzögern für maximal "
hätte ich jetzt eigentlich lediglich eine random Verzögerung zwischen 0 sekunden (also gar keine) und eben jenem Maximalwert erwartet,
aber eben keine untere Schranke für die Verzögerung.

 

[kneitzel]

Dann habe ich dich da missverstanden.
Aus dem "Aufgabe verzögern für maximal "
hätte ich jetzt eigentlich lediglich eine random Verzögerung zwischen 0 sekunden (also gar keine) und eben jenem Maximalwert erwartet,
aber eben keine untere Schranke für die Verzögerung.

Dann hast Du mich richtig verstanden, denn eine untere Grenze macht keinen Sinn!

Also konkretes Beispiel:
Was ist der Unterschied zwischen:
Jeden Tag 13 Uhr, Verzögert um 30-60 Minuten (Also incl. unterer Grenze, die es nicht gibt) und
Jeden Tag 13:30 Uhr, verzögert um bis zu 30 Minuten
???
Da ist kein Unterschied, denn die Ausführung startet immer zwischen 13:30 und 14:00.

Daher das allgemeine: Wenn Du eine Angabe hast mit unterer und oberer Grenze, dann addierst Du die untere Grenze zur Zeit und die neue Zeitdauer ist obere Grenze minus untere Grenze.

Edit: Tippfehler behoben.

 

[berndoa]

Hm okay, das macht dann schon SInn

Dürfte der Scheduler für meine Zwecke hinreichend gut den Job erfüllen

Bleibt nur noch alles Andere zu lösen

 

[Barista]

Dürfte der Scheduler für meine Zwecke hinreichend gut den Job erfüllen

Wenn nicht, dann könntest Du auch dein Programm in einem sehr kurzen Intervall immer wieder starten und dann im Programm die Bedingung für die echte Arbeit prüfen.

Java ist dafür aufgrund des hohen Aufwandes beim Start nicht gut geeignet.

Übrigens: Erst Lotto, jetzt Poker? Beim Glücksspiel gewinnt meist nur die Bank!

Wenn Du schon eigenes Geld einsetzt, dann versuch lieber Aktien usw..

 

[Barista]

Wenn nicht, dann könntest Du auch dein Programm in einem sehr kurzen Intervall immer wieder starten und dann im Programm die Bedingung für die echte Arbeit prüfen.

Java ist dafür aufgrund des hohen Aufwandes beim Start nicht gut geeignet.

Alternativ kannst Du das Java-Programm einfach durchlaufen lassen (darin die Zeit-Bedingung prüfen).

Moderne PC und OS sollten das aushalten.

 

[berndoa]

Wenn nicht, dann könntest Du auch dein Programm in einem sehr kurzen Intervall immer wieder starten und dann im Programm die Bedingung für die echte Arbeit prüfen.

Java ist dafür aufgrund des hohen Aufwandes beim Start nicht gut geeignet.

Übrigens: Erst Lotto, jetzt Poker? Beim Glücksspiel gewinnt meist nur die Bank!

Wenn Du schon eigenes Geld einsetzt, dann versuch lieber Aktien usw..

Gibts für Aktien ne gute Strategie oder so?
Habe von Aktien irgendwie gar keinen Plan :.-/

 

[LimDul]

Gibts für Aktien ne gute Strategie oder so?
Habe von Aktien irgendwie gar keinen Plan :.-/

Naja, von Roulette (bzw. Stochastik) aber auch nicht
Aus vorangegangen Ergebnisse bei einem elektronischen Roulette was zu schließen ist genauso erfolgsversprechend wie vom Wetter auf Rot oder Schwarz zu schließen.

 

[Barista]

Gibts für Aktien ne gute Strategie oder so?
Habe von Aktien irgendwie gar keinen Plan :.-/

Naja, von Roulette (bzw. Stochastik) aber auch nicht
Aus vorangegangen Ergebnisse bei einem elektronischen Roulette was zu schließen ist genauso erfolgsversprechend wie vom Wetter auf Rot oder Schwarz zu schließen.

Also beim Glücksspiel nimmt sich der Anbieter immer was vom eingezahlten Geld weg.

Aktien (nicht irgendwelche Crash-Firmen, sondern DAX oder so) steigen typischerweise, da hast Du nur die Depotkosten und Transaktionskosten.

Das heisst, bei Aktien usw. arbeitest Du weniger gegen den Wiederstand des Geldverlustes.

Ich mache hier aber keine Finanzberatung.

Ich hatte früher mal ein Depot bei Consors.
Dabei habe ich die Abwärtsbewegung seit 2000 mitgemacht, bin aber am Ende neutral rausgekommen.

Dann gibt es noch den Stuttgarter Aktienclub.
Die argumentieren für Unternehmen, die unabhängig von der Konjunktur steigende Aktien haben.
Der angebotene eigene Fond hat aber sehr hohe Kosten.

 

[Meniskusschaden]

Gibts für Aktien ne gute Strategie oder so?
Habe von Aktien irgendwie gar keinen Plan :.-/

Ich glaube, im Moment wären für Laien Sparpläne in sehr breit gestreute ETFs eine Überlegung wert. Also nicht irgendwelche Branchen- oder Länderschwerpunkte, sondern eine möglichst realistische Abbildung der gesamten Weltwirtschaft. Alles andere würde ja voraussetzen, dass man irgendeinen Wissensvorsprung bzgl. Firmen-Interna oder Fehlbewertungen des Marktes hat, was bei einem Laien ja eher selten der Fall ist.
Aber hört lieber nicht auf mich, ich habe nämlich selbst auch keine Ahnung.

 

[berndoa]

Naja, von Roulette (bzw. Stochastik) aber auch nicht
Aus vorangegangen Ergebnisse bei einem elektronischen Roulette was zu schließen ist genauso erfolgsversprechend wie vom Wetter auf Rot oder Schwarz zu schließen.

Wozu was schlussfolgern wollen wenn es Martingale gibt? >:-D

 

[berndoa]

Dann hast Du mich richtig verstanden, denn eine untere Grenze macht keinen Sinn!

Also konkretes Beispiel:
Was ist der Unterschied zwischen:
Jeden Tag 13 Uhr, Verzögert um 30-60 Minuten (Also incl. unterer Grenze, die es nicht gibt) und
Jeden Tag 13:30 Uhr, verzögert um bis zu 30 Minuten
???
Da ist kein Unterschied, denn die Ausführung startet immer zwischen 13:30 und 14:00.

Daher das allgemeine: Wenn Du eine Angabe hast mit unterer und oberer Grenze, dann addierst Du die untere Grenze zur Zeit und die neue Zeitdauer ist obere Grenze minus untere Grenze.

Edit: Tippfehler behoben.

Wobei man da die Begrenzungen des Schedulers nicht vergessen sollte, denn der kennt keine 3 Tage und 2 Stunden, sodnern bloss "alle 3 Tage" oder "alle 4 tage".
Aber gut, ich habe es mit 3 tagen schon eh großzügig gerechnet, da tut es der Scheduler für meine Zwecke.

Ich muss nur mal das Selenkium auf die Reihe kriegen.

An sich hätte es der Robot fast schon für meine Zwecke getan aber mit dem kann ich die Sachen in dem browser nicht im hitnergrund irgendwo ablaufen lassen während ich im Vordergrund Anderes mahce.
Das kann dann wieder nur Sleenium mit seinem "Web Driver" :-/

 

[kneitzel]

Wobei man da die Begrenzungen des Schedulers nicht vergessen sollte, denn der kennt keine 3 Tage und 2 Stunden, sodnern bloss "alle 3 Tage" oder "alle 4 tage".

Das ist so nicht richtig. Teilweise bietet er im DropDown nicht alles so an, wie man es gerne hätte, aber man kann da alles eintragen.

Die Einheit "Tage" ist da natürlich zu hoch, da er nur Ganzzahlen mag. Also nimmt man Stunden. 3 Tage und 2 Stunden sind 74h:

 

[berndoa]

Das... ist wahr.

Egal, ich schlage mich jetzt mal mit der Installation von Selenium rum und wie man das bedient.