Python Selenium Max retries exceeded with url?

[Yokozuna]

Hallo,

Ich wollte meinen Code loopen, aber bekomme diesen error sobald es das erste mal erledigt wurde.

Unten noch mal der ganze error. Wäre Top falls mir jemand helfen könnte

urllib3.exceptions.MaxRetryError: HTTPConnectionPool(host='localhost', port=54353): Max retries exceeded with url: /session/85f74a850b8833e4b0352d5a5fbdd04b/url (Caused by NewConnectionError('<urllib3.connection.HTTPConnection object at 0x00000245552E3400>: Failed to establish a new connection: [WinError 10061] Es konnte keine Verbindung hergestellt werden, da der Zielcomputer die Verbindung verweigerte'))

[noisefloor]

Hallo,

bist du sicher, dass das schon nach dem ersten Schleifendurchlauf passiert?

Ansonsten ist der Fehler doch, klar, steht im Klartext am Ende des Stacktraces. Entweder lauscht kein Server auf localhost:54353 oder eine Firewall oder was auch immer blockt die Verbindung auf localhost:54353

Gruß, noisefloor

[Yokozuna]

Hallo,

bist du sicher, dass das schon nach dem ersten Schleifendurchlauf passiert?

Ansonsten ist der Fehler doch, klar, steht im Klartext am Ende des Stacktraces. Entweder lauscht kein Server auf localhost:54353 oder eine Firewall oder was auch immer blockt die Verbindung auf localhost:54353

Gruß, noisefloor

Ja, am Anfang läuft alles gut bis er es dann das 2 mal machen will und an dem error scheitert.

[__deets__]

Ist das ein externer Server? Wenn ja, dann hat der da im Zweifel eine Scraping-Bremse eingebaut, und verhindert, was du da vor hast.

[Yokozuna]

Ist das ein externer Server? Wenn ja, dann hat der da im Zweifel eine Scraping-Bremse eingebaut, und verhindert, was du da vor hast.

Jap ist ein externer Server. Genau das dachte ich mir auch. Kann man das irgendwie umgehen?

[__deets__]

Keine Ahnung. Langsamer arbeiten zB. Oder den ja schon von dir an anderer Stelle gewuenschten "menschlichen Eingabemodus" programmieren. Die haben halt irgendwelche Heuristiken, und du musst versuchen, die zu umgehen. Und natuerlich sollst du das nicht, wenn es nach denen geht.

[Yokozuna]

Keine Ahnung. Langsamer arbeiten zB. Oder den ja schon von dir an anderer Stelle gewuenschten "menschlichen Eingabemodus" programmieren. Die haben halt irgendwelche Heuristiken, und du musst versuchen, die zu umgehen. Und natuerlich sollst du das nicht, wenn es nach denen geht.

Könnte es auch sein, dass Selenium von Chrome detected wird? Denn in Chrome steht: Chrome wird von automatisierter Testsoftware gesteuert

[__deets__]

Chrome interessiert das nicht, und Chrome kontrolliert auch nicht, dass der Server nicht mehr antwortet.

[noisefloor]

Hallo,

Chrome ist nur die Engine (bzw. eine Engine, die Selenium nutzen kann). Ohne Engine geht es nun mal nicht.

Kann man das irgendwie umgehen?

Schau nach, ob die Seite, die du scrapen willst, ein API hat, die du nutzen könntest.

Gruß, noisefloor