Requests Error

[SomePythonDude]

Hi!

Ich benutze requests und sseclient um von einer Webseite mir bestimmte Daten zu ziehen (Börse Frankfurt). Auf meinem Lokalen PC funktioniert auch alles einwandfrei. Doch wenn ich dies auf meinen Ubuntu 20.04 LTS mit Python Version 3.10 aufspiele und laufen lasse, kommt folgender Fehler:

requests.exceptions.InvalidURL: Failed to parse: <Response [200]>

Ich benutze die selbe versionen sowohl von den Library als auch von Python. Wieso kommt dieser Fehler zustande?

Das Script findet ihr hier: https://github.com/joqueka/bf4py

Mein Code sieht wie folgt aus:

Code: Alles auswählen

client = bf4py.live_data.live_quotes(sys.argv[1], callback=json, mic="XSC")
client.open_stream()
while True:
    sleep(5)
    print(client.data[-1])

Danke für jegliche unterstützung!

[__blackjack__]

@SomePythonDude: Wie sieht denn die URL aus?

[SomePythonDude]

"https://api.boerse-frankfurt.de/v1/data ... P5&mic=XSC"

Dies ist die URL, wenn ich die Webseite öffne, dann funktioniert es einwandfrei. Nur halt auf meinem Mac

[__blackjack__]

@SomePythonDude: Ist das die URL die Du jetzt in den Browser eingegeben hast, weil Du weisst das die richtig ist, oder *tatsächlich* die URL die das Programm benutzt?

[SomePythonDude]

Das ist ein Socket den die Börse benutzt um Echtzeitdaten auf der Webseite darzustellen. Dieses Package(der programmierer) hat die schnittstelle raus gefunden.

Gefunden habe ich das in dem code von ihm:

Code: Alles auswählen

socket = requests.get(url, stream=True, headers=header, timeout=(3.5, 5))
print(socket) #Output "<Response [200]>"
client = sseclient.SSEClient(socket)

scheinbar wird requests im stream benutzt, nur wenn socket geprinted wird, kommt dabei dieser Response raus.
Auf Mac/Windows scheint das auch gut zugehen, nur irgendwie nicht auf Ubuntu 20.04. Deshalb auch der Fehler: Failed to parse: <Response [200]>, weil dies keine URL ist.

[__blackjack__]

@SomePythonDude: Die Frage ist halt was `url` bei diesem Aufruf *tatsächlich* für einen Wert hat. Nicht was Du glaubst, nicht was Du wünschst, sondern was das tatsächlich für ein Wert ist.

[SomePythonDude]

Ich habe jetzt den sseclient ausgebaut und stattdessen Requests Session mit Stream=True und ohne Timeout verwendet. Das klappt einwandfrei.

Ich denke es lag daran das der client die eingabe: "<Response [200]>" nicht verarbeiten konnte. Komisch das es auf Mac und Windows geht, finde es aber auch noch heraus

[__blackjack__]

@SomePythonDude: Das ist wirklich komisch denn das sollte unabhängig vom Betriebssystem *nicht* funktionieren. Du hast da ein `requests.Response`-Objekt und versuchst das `sseclient.SSEClient()` als URL zu übergeben. Das Objekt benutzt diesen Wert als URL für einen weiteren `requests.get()`-Aufruf, was natürlich nicht geht.

Das `Response`-Objekt `socket` zu nennen, hilft sicher auch nicht wenn man anscheinend sowieso schon unsicher mit den Typen ist. Wobei auch ein Socket-Objekt falsch wäre wenn eine URL erwartet wird.

[DeaD_EyE]

Wird Zeit, dass alles auf 0 gesetzt wird. Dann braucht man auch diese dämlichen Abfragen nicht mehr!

Mir ist aufgefallen, dass man das response-Objekt nicht erstellen muss, da der sseclient das schon macht: https://pypi.org/project/sseclient/

Code: Alles auswählen

from sseclient import SSEClient

messages = SSEClient('http://mysite.com/sse_stream/')
for msg in messages:
    do_something_useful(msg)

bf4py: https://github.com/joqueka/bf4py/blob/m ... ils.py#L90

Probier mal statdessen:

Code: Alles auswählen

client = sseclient.SSEClient(url)

Und die Zeile 90 auskommentieren.