Tutorial Webscraping Dynamischer Seiten/Menus

[prakti12]

Bin auf der Suche nach Webscraping Tutorials die sich auf derselben Seite dynamisch geladene Menus durchgehen und Paging erklären.

[noisefloor]

Such' mal mit der Suchmaschine deines Vertrauens nach "selenium" und "headless browser". Das Thema ist aber auch hier im Forum schon oft durchgekaut worden.

Und der übliche Hinweis: bevor du versuchst, eine Webseite aufwendig zu scrapen, die ggf. sogar Maßnahmen dagegen ergreift: schau' doch mal nach, ob der Betreiber der Webseite nicht eine API bereitstellt, wo sich die Daten einfacher abrufen lassen.

Gruß, noisefloor

[oldboyJR]

Ganz zu schweigen das man beim veröffendlichen der so gewonnenen Daten ärger bekommen kann.