Seite 1 von 1

[WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Donnerstag 21. Juni 2018, 13:54
von Spidermini
Hallo zusammen,

ich führe im Monitoring - mit einem Raspi - eine Seite wo das aktuelle Spiel angezeigt wird.
Da ich das Liveergebnis nicht händisch abschreiben möchte, will ich per Python (ich hoffe ich bin richtig)? das aktuelle Ergebnis (z. B. Dänemark - Australien im Moment) von irgendeiner Sportwebseite beziehen möchte. Ideal wäre auch noch die Spielminute oder sogar Torschützen.

Wie ist das Ganze realisierbar? Ich konnte nicht wirklich googln, weil ich nicht weiß wie sich diese Vorgehensweise nennt.

Liebe Grüße
Ein absoluter Python Anfänger

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Donnerstag 21. Juni 2018, 14:01
von DeaD_EyE
Ja, das ist möglich.

Sofern du das privat für dich nutzt, sollte es kein Problem darstellen. Ich weiß aber nicht wie das sich verhält, wenn du bei fremden Internetseiten webscraping betreibst, um es dann bei dir anzuzeigen.
Das könnte rechtliche Probleme geben. Könnte... Das muss nicht heißen, dass es immer eintritt.

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Donnerstag 21. Juni 2018, 14:10
von Spidermini
DeaD_EyE hat geschrieben: Donnerstag 21. Juni 2018, 14:01 Ja, das ist möglich.

Sofern du das privat für dich nutzt, sollte es kein Problem darstellen. Ich weiß aber nicht wie das sich verhält, wenn du bei fremden Internetseiten webscraping betreibst, um es dann bei dir anzuzeigen.
Das könnte rechtliche Probleme geben. Könnte... Das muss nicht heißen, dass es immer eintritt.
Danke für die schnelle Antwort.
Das ganze läuft natürlich nur mit Absprache und Erlaubnis.

Wie ist das ganze nu möglich? Erfordert das viel Aufwand?
Gibt es dafür evtl. empfehlenswerte Tutorials oder schon vorgefertige Scripts?

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Donnerstag 21. Juni 2018, 14:25
von Bolitho
schau dir mal https://www.openligadb.de/ an

und webscraping mit python ist das stichwort für google

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Donnerstag 21. Juni 2018, 14:32
von __blackjack__
Ich würde eine Webseite suchen, die dann mit `requests` runterladen, und mit BeautifulSoup (+ lxml) auswerten. Ist einer der üblichen Wege.

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Freitag 22. Juni 2018, 07:46
von Spidermini
Bolitho hat geschrieben: Donnerstag 21. Juni 2018, 14:25 schau dir mal https://www.openligadb.de/ an

und webscraping mit python ist das stichwort für google

Hierbei müsste ich meine Ergebniss manuel eintragen oder jemand vertrauen, der es zuversichtig und vor allem SEHR aktuell macht. Aber trotzdem danke für die interessante Webseite. Sinnvoll für ein anderes Projekt von mir!

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Freitag 22. Juni 2018, 07:46
von Spidermini
__blackjack__ hat geschrieben: Donnerstag 21. Juni 2018, 14:32 Ich würde eine Webseite suchen, die dann mit `requests` runterladen, und mit BeautifulSoup (+ lxml) auswerten. Ist einer der üblichen Wege.

Danke, werde ich mal versuchen!

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Freitag 22. Juni 2018, 09:18
von Bolitho
Spidermini hat geschrieben: Freitag 22. Juni 2018, 07:46
Bolitho hat geschrieben: Donnerstag 21. Juni 2018, 14:25 schau dir mal https://www.openligadb.de/ an

und webscraping mit python ist das stichwort für google

Hierbei müsste ich meine Ergebniss manuel eintragen oder jemand vertrauen, der es zuversichtig und vor allem SEHR aktuell macht. Aber trotzdem danke für die interessante Webseite. Sinnvoll für ein anderes Projekt von mir!
so schnell bist du nicht, als das du zu erst die Daten dort einträgst. jede Wette, auch ich habe es versucht :)

vielleicht magst du ein paar mehr details zu deinen Projekten nenen, vielleicht auch per Nachricht oder Email. Ich habe das Gefühl an ähnlichen Dingen zu arbeiten und vielleicht können wir uns gegenseitig unterstützen.

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Freitag 22. Juni 2018, 10:52
von DeaD_EyE
Schau mal hier: https://github.com/OpenLigaDB/OpenLigaDB-Samples
Da kannst du dir das Webscraping sparen.

Ich hab bisher noch nicht herausgefunden, wie man fifa2018 abruft, das soll aber auch gehen.
https://www.openligadb.de/Datenhaushalt/

Ich bin momentan zu blöd die passende Anfrage zu finden. Schau einfach mal selbst nach und/oder hat noch jemand anderes die Lösung.

Re: [WM2018] Daten aus der Webseite für's Monitoring auslesen

Verfasst: Samstag 23. Juni 2018, 09:31
von nezzcarth
DeaD_EyE hat geschrieben: Freitag 22. Juni 2018, 10:52 Ich hab bisher noch nicht herausgefunden, wie man fifa2018 abruft, das soll aber auch gehen.
18, nicht 2018. Damit funktionieren die Anfragen analog zu den beschriebenen.