Das deutsche Python-Forum

Code: Alles auswählen

12:14:36 (212.18 KB/s) - `gelb.bcom.at/.listing' saved [188]
12:14:36 (282.51 KB/s) - `gelb.bcom.at/index.html' saved [623]
12:14:37 (477.68 KB/s) - `gelb.bcom.at/sw3/.listing' saved [67]
12:14:37 (409.21 KB/s) - `gelb.bcom.at/test/.listing' saved [67]
12:14:37 (275.20 KB/s) - `gelb.bcom.at/test/index.html' saved [623]

Code: Alles auswählen

>>> s = """
... 12:44:44 URL: ftp://gelb.bcom.at/ [188] -> "gelb.bcom.at/.listing" [1]
... 12:44:44 URL: ftp://gelb.bcom.at/index.html [614] -> "gelb.bcom.at/index.html" [1]
... 12:44:44 URL: ftp://gelb.bcom.at/sw3/ [67] -> "gelb.bcom.at/sw3/.listing" [1]
... 12:44:45 URL: ftp://gelb.bcom.at/test/ [67] -> "gelb.bcom.at/test/.listing" [1]
... 12:44:45 URL: ftp://gelb.bcom.at/test/index.html [614] -> "gelb.bcom.at/test/index.html" [1]
... 
... FINISHED --12:44:45--
... Downloaded: 1,550 bytes in 5 files
... """
>>> for line in s.splitlines():
...     if '"' in line:
...         parsed_str = line.split('"')[1]
...         if not parsed_str.endswith(".listing"):
...             print parsed_str
...     
gelb.bcom.at/index.html
gelb.bcom.at/test/index.html
>>> 

Code: Alles auswählen

#!/usr/bin/env python
# -*- coding: iso-8859-1 -*-

import os
import ftplib
import pickle

DIRSET_FILENAME = "dirset.bin"
FTP_HOST = "gelb.bcom.at"
FTP_USERNAME = "anonymous"
FTP_PASSWORD = ""
LOGFILENAME = "logfile.log"


def load_dirset():
    """
    Holt sich aus einer gepickelten Datei ein Set mit den Textzeilen des
    letzten Versuchs.
    """
    
    if os.path.isfile(DIRSET_FILENAME):
        f = file(DIRSET_FILENAME, "rb")
        dirset = pickle.load(f)
        f.close()
    else:
        dirset = set()
    
    return dirset


def save_dirset(dirset):
    """
    Schreibt das übergebene Set in eine Datei
    """
    
    f = file(DIRSET_FILENAME, "wb")
    pickle.dump(dirset, f, protocol = pickle.HIGHEST_PROTOCOL)
    f.close()


def main():
    
    ftp = ftplib.FTP(FTP_HOST, FTP_USERNAME, FTP_PASSWORD)
    
    old_dirset = load_dirset()
    new_dirset = set()
    
    dirlist = []
    ftp.dir(dirlist.append)
    
    for diritem in dirlist:
        if not diritem.startswith("d"):
            if diritem.lower().endswith(".adb"):
                new_dirset.add(diritem)
    
    # Hier sind die geänderten Datenzeilen
    diff_dirset = new_dirset.difference(old_dirset)
    
    print old_dirset
    print
    print new_dirset
    print
    print diff_dirset
    print
    
    # Die Dateinamen können hier natürlich auch in eine Logdatei geschrieben
    # werden
    f = file(LOGFILENAME, "a")
    for item in diff_dirset:
        f.write(item + "\n")
    f.close()
    
    # Hier kann mit den geänderten Datenzeilen etwas gemacht werden.
    # Z.B. kann jetzt eine Liste mit Dateinamen erstellt werden
    waste = "-rw-r--r--   1 ftp      ftp             0 Apr  6 12:39 "
    filenames = [ item[len(waste):] for item in diff_dirset ]
    
    print filenames
    
    # Dateien herunterladen
    for filename in filenames:
        f = file(filename, "wb")
        ftp.retrbinary("RETR %s" % filename, f.write)
        f.close()
    
    # Neues Set speichern
    save_dirset(new_dirset)
    
    ftp.close()

if __name__ == "__main__":
    main() 

# Nicht vergessen: Fehler abfangen

Code: Alles auswählen

 b = file("E:\AEP\UglyProg\log.log", "wb")
    for filename in filenames: 
        b.write(filename + "\n")
    b.close()

Code: Alles auswählen

#!/usr/bin/env python
# -*- coding: iso-8859-1 -*-

import os
import ftplib
import pickle

DIRSET_FILENAME = "dirset.bin"
FTP_HOST = "1****"
FTP_USERNAME = "admin"
FTP_PASSWORD = "****"
LOGFILENAME = "logfile.log"
MONOLOG = "E:\\AEP\\Uglyprog\\log.log"



def load_dirset():
    """
    Holt sich aus einer gepickelten Datei ein Set mit den Textzeilen des
    letzten Versuchs.
    """
   
    if os.path.isfile(DIRSET_FILENAME):
        f = file(DIRSET_FILENAME, "rb")
        dirset = pickle.load(f)
        f.close()
    else:
        dirset = set()
   
    return dirset


def save_dirset(dirset):
    """
    Schreibt das übergebene Set in eine Datei
    """
   
    f = file(DIRSET_FILENAME, "wb")
    pickle.dump(dirset, f, protocol = pickle.HIGHEST_PROTOCOL)
    f.close()


def main():
   
    ftp = ftplib.FTP(FTP_HOST, FTP_USERNAME, FTP_PASSWORD)
   
    old_dirset = load_dirset()
    new_dirset = set()
   
    dirlist = []
    ftp.cwd("\\CDR\\checkout")
    ftp.dir(dirlist.append)
   
    for diritem in dirlist:
        if not diritem.startswith("d"):
            if diritem.lower().endswith(".adb"):
                new_dirset.add(diritem)
   
    # Hier sind die geänderten Datenzeilen
    diff_dirset = new_dirset.difference(old_dirset)
   
 

    print old_dirset
    print
    print new_dirset
    print
    print diff_dirset
    print 
   
    # Die Dateinamen können hier natürlich auch in eine Logdatei geschrieben
    # werden
    f = file(LOGFILENAME, "wb")
    for item in diff_dirset:
    	f.write(item + "\n")
    f.close()
   
    # Hier kann mit den geänderten Datenzeilen etwas gemacht werden.
    # Z.B. kann jetzt eine Liste mit Dateinamen erstellt werden
    waste = "-rw-r--r--   1 ftp      ftp             0 Apr  6 12:39 "
    filenames = [ item[len(waste):] for item in diff_dirset ]
   
    print filenames
   
    b = file(MONOLOG, "wb")
    for filename in filenames: 
    	b.write(filename + "\n")
    b.close()

    # Dateien herunterladen
    for filename in filenames:
    	f = file(filename, "wb")
    	ftp.retrbinary("RETR %s" % filename, f.write)
    	f.close()
   
    # Neues Set speichern
    save_dirset(new_dirset)
   
    ftp.close()

if __name__ == "__main__":
    main()

Code: Alles auswählen

ftp.cwd("/CDR/checkout")