lxml.html kann auch Formulare ausfüllen und übermitteln . Und lxml.html.open_in_browser speichert deinen Baum und zeigt ihn als Website im Browser an. Mit den beiden in Kombination kannst du bestimmt was zusammenbasteln. :)

Bevor ich das jetzt installiere und ausprobiere: Kann ich nicht den ...

Hallo,

ich lege mittels mechanize diverse Artikel in einen Online-Warenkorb. Nun möchte ich die Bestellung aber von dem Abschließen noch einmal in einem normalen Browser (Firefox/Ubuntu) überprüfen.

Wenn ich nun einfach Firefox öffne und mich einlogge ist der Warenkorb leer. Der Warenkorb wird ...

Hallo,

(ich kam einige Tage nicht dazu, aber:)

das hat prima funktioniert! Danke für die Hilfe!

Hallo,

nachdem ich eine Website mittels mechanize/Beautifulsoup nach Angeboten durchsucht habe, möchte ich bestimmte Artikel in den Warenkorb legen.

Der html-Code sieht für diesen Artikel so aus:

<tr>

<td class="virgin"><a href="index.html?mainPage=showSellerChart&idInfoUser=10239">arion74</a ...

Leonidas hat geschrieben:``br.response()`` gibt dir einfach den HTML-Code, den du dann an BeautifulSoup weiterleistest.

So einfach... Danke für die Hilfe.

Jochen

Jetzt habe ich es.
Das funktioniert, ohne dass ich verstehe, was das response macht. Kannst Du mir das erklären?

Naja, du kannst dir ja mit Mechanize den Code ausgeben lassen und den mit html5lib, lxml.html oder BeautifulSoup scrapen. Die Module schließen sich ja nicht gegenseitig aus.

Leider ist mir das noch nicht gelungen. Wenn ich mittels

br = mechanize.Browser()
br.open('http://www.magickartenmarkt ...

Hallo,

ich habe schon ein paar mal mittels Beautiful Soup Webseiten geparst.

Nun möchte ich mich auf der Seite
http://www.magickartenmarkt.de/index.php
einloggen und ein paar Informationen auslesen.

Mit Beautiful Soup kann ich mich soweit ich weiß nicht einloggen. Oder?
Mit mechanize kann ich ...

Ok, ich versuche anhand der Dokumentation diese Zeile nachzuvollziehen:
editionen_table = soup.find('table', dict(id='bgednav1r'))
Es geht doch darum, als ersten Anlaufpunkt die Tabelle zu finden, die eben diese id hat. Und von da aus die nächste Tabelle, die eben die ist, in denen die Links ...

Gibt es irgendwo ein Tutorial für BS jenseits der Dokumentation?

Hässliche Seite. Also was das HTML angeht.


Das führte dazu, dass ich mich nicht wirklich zurecht fand. Ich hatte schon die Tabelle mit der id 'bgednav1r' als Anhaltspunkt ausgemacht. Aber es war mir nicht gelungen, darauf vernünftig zuzugreifen.

editionen_table = soup.find('table', dict(id ...

Hallo BlackJack,

danke, für den "Tipp". Ich komme gerade nicht dazu, werde aber in den nächsten Tagen schauen und feedback geben.

Jochen

BlackJack hat geschrieben:Hässliche Seite. Also was das HTML angeht. Hier ein Versuch:
...

Übrigens muss es auch bei "source = urlopen" nicht "html" heißen, sondern "php". Ich hatte das richtig gepostet. Warum wird das automatisch umgewandelt?

Erster Tipp: Das ist syntaktisch falsch. Und ich bekomme bei der Seite einen 500er Fehler!?

Hm... zwei Dreckfuhler.

Hochkommas fehlen natürlich. Mein Fehler.

Aber der Link muss statt "html" "php" heißen. Interessanterweise kann ich die URL hier so oft einfügen, wie ich will. Die Forensoftware ...

Hallo,

es geht um die Tabelle "Editionen" rechts unten auf dieser Seite:
http://www.miraclegames.de/d/shopindex.html?id=0100

Ich möchte die Link-Adressen die hinter den diversen "R" "U" und "C" liegen auslesen und in eine Datei speichern. Das sollte mit Beautifulsoup machbar sein. Aber ich ...

Ja, das war's schon! Danke schön!

Hallo,

ich füge mittels
result.append(value)

Daten einer Liste hinzu, die dann mittels
writer = csv.writer(csv_file)
writer.writerows(extract(source))

in eine csv-Datzei geschrieben werden.

Nun möchte ich gerne, dass die Daten alle in Anführungszeichen stehen, da z.T. Kommas in den Daten ...