Die Suche ergab 3 Treffer

von pythondata
Donnerstag 10. Oktober 2019, 14:00
Forum: Datenbankprogrammierung mit Python
Thema: Export in CSV Datei sehr langsam
Antworten: 8
Zugriffe: 2553

Re: Export in CSV Datei sehr langsam

Hallo zusammen,

sorry, da habe ich mich verschrieben, ich meinte 3 Zahlen mit 20 Zeichen!?! :-)
Eine Zeile sieht so aus, sind gar keine 20 Zeichen in den ersten 3 Spalten:

Col 1 Col 2 Col 3 Date V1 V2
16100000 27100000 1000 01.01.2019 50 -40

(einmal untereinander für die bessere Lesbarkeit)
Col 1 ...
von pythondata
Donnerstag 10. Oktober 2019, 11:24
Forum: Datenbankprogrammierung mit Python
Thema: Export in CSV Datei sehr langsam
Antworten: 8
Zugriffe: 2553

Re: Export in CSV Datei sehr langsam

Hallo,

vielen Dank für die schnelle Antwort!

In einer Zeile stehen 3 Zahlen mit ca. 20 Zeilen, ein Datum und zwei "Komma"-Zahlen.
Oder was meinst Du mit der Größe einer Zeile des Frames?
von pythondata
Donnerstag 10. Oktober 2019, 10:59
Forum: Datenbankprogrammierung mit Python
Thema: Export in CSV Datei sehr langsam
Antworten: 8
Zugriffe: 2553

Export in CSV Datei sehr langsam

Guten Tag,

ich versuche einen DataFrame mit ca. 30 Mio Datensätzen in eine CSV zu exportieren. Das funktioniert auch, ist aber extrem langsam.

Die Anwendung selbst läuft in 2 Min durch und bereitet Daten auf, das bringt mir aber wenig wenn der Export danach 30 Minuten dauert.
Ist das richtig so ...