aufbereitung und abspeichern eines dicts
Verfasst: Montag 16. September 2013, 17:03
ich habe eine liste von 300 namen; jeder name wird gegoogelt und der erste Link wird genommen (passiert automatisch); nach dem aufrufen des links werden dann informationen gesucht (zB Kontaktdaten).
Nun möchte ich diese abspeichern im Form eines dicts:
{person1: [webadresse, kontaktdaten], person2: [webadresse, kontaktdaten]}
das Problem, was ich zur Zeit habe, ist, dass ich eigentlich das dict immer abspeichern will, sobald der neue eintrag erledigt wurde. was momentan der fall ist: ich erledige 20 namen; dann stürzt irgendwas ab und nichts wurde gespeichert... dann beginnt die arbeit von vorne.
in meiner funktion kann ich bereits als input ein dict eingeben, so dass, falls die person schon gesucht wurde, diese dann geskipped wird.
sinnvoll wäre eine idee, dass das dict in ein file geschrieben wird und ich dann dieses file nehmen könnte als input für das nächste mal (vorallem werde ich pro tag nur ca. 10 personen suchen, da noch einiges mehr in die liste kommt als nur kontaktdaten).
wie kann ich das problem auf eine gescheite art lösen?
Nun möchte ich diese abspeichern im Form eines dicts:
{person1: [webadresse, kontaktdaten], person2: [webadresse, kontaktdaten]}
das Problem, was ich zur Zeit habe, ist, dass ich eigentlich das dict immer abspeichern will, sobald der neue eintrag erledigt wurde. was momentan der fall ist: ich erledige 20 namen; dann stürzt irgendwas ab und nichts wurde gespeichert... dann beginnt die arbeit von vorne.
in meiner funktion kann ich bereits als input ein dict eingeben, so dass, falls die person schon gesucht wurde, diese dann geskipped wird.
sinnvoll wäre eine idee, dass das dict in ein file geschrieben wird und ich dann dieses file nehmen könnte als input für das nächste mal (vorallem werde ich pro tag nur ca. 10 personen suchen, da noch einiges mehr in die liste kommt als nur kontaktdaten).
wie kann ich das problem auf eine gescheite art lösen?