Hallo zusammen,
sorry, da habe ich mich verschrieben, ich meinte 3 Zahlen mit 20 Zeichen!?! :-)
Eine Zeile sieht so aus, sind gar keine 20 Zeichen in den ersten 3 Spalten:
Col 1 Col 2 Col 3 Date V1 V2
16100000 27100000 1000 01.01.2019 50 -40
(einmal untereinander für die bessere Lesbarkeit)
Col 1 ...
Die Suche ergab 3 Treffer
- Donnerstag 10. Oktober 2019, 14:00
- Forum: Datenbankprogrammierung mit Python
- Thema: Export in CSV Datei sehr langsam
- Antworten: 8
- Zugriffe: 2553
- Donnerstag 10. Oktober 2019, 11:24
- Forum: Datenbankprogrammierung mit Python
- Thema: Export in CSV Datei sehr langsam
- Antworten: 8
- Zugriffe: 2553
Re: Export in CSV Datei sehr langsam
Hallo,
vielen Dank für die schnelle Antwort!
In einer Zeile stehen 3 Zahlen mit ca. 20 Zeilen, ein Datum und zwei "Komma"-Zahlen.
Oder was meinst Du mit der Größe einer Zeile des Frames?
vielen Dank für die schnelle Antwort!
In einer Zeile stehen 3 Zahlen mit ca. 20 Zeilen, ein Datum und zwei "Komma"-Zahlen.
Oder was meinst Du mit der Größe einer Zeile des Frames?
- Donnerstag 10. Oktober 2019, 10:59
- Forum: Datenbankprogrammierung mit Python
- Thema: Export in CSV Datei sehr langsam
- Antworten: 8
- Zugriffe: 2553
Export in CSV Datei sehr langsam
Guten Tag,
ich versuche einen DataFrame mit ca. 30 Mio Datensätzen in eine CSV zu exportieren. Das funktioniert auch, ist aber extrem langsam.
Die Anwendung selbst läuft in 2 Min durch und bereitet Daten auf, das bringt mir aber wenig wenn der Export danach 30 Minuten dauert.
Ist das richtig so ...
ich versuche einen DataFrame mit ca. 30 Mio Datensätzen in eine CSV zu exportieren. Das funktioniert auch, ist aber extrem langsam.
Die Anwendung selbst läuft in 2 Min durch und bereitet Daten auf, das bringt mir aber wenig wenn der Export danach 30 Minuten dauert.
Ist das richtig so ...
