So schreiben Sie UTF-8 in eine CSV-Datei

Ich versuche, aus einem PyQt4 eine Textdatei im CSV-Format zu erstellen QTableWidget. Ich möchte den Text mit einer UTF-8-Codierung schreiben, da er Sonderzeichen enthält. Ich benutze folgenden Code:

import codecs
...
myfile = codecs.open(filename, 'w','utf-8')
...
f = result.table.item(i,c).text()
myfile.write(f+";")

Es funktioniert so lange, bis die Zelle ein Sonderzeichen enthält. Ich habe es auch mit versucht

myfile = open(filename, 'w')
...
f = unicode(result.table.item(i,c).text(), "utf-8")

Es hört aber auch auf, wenn ein Sonderzeichen erscheint. Ich habe keine Ahnung, was ich falsch mache.

Von Ihrem Shell-Lauf:

pip2 install unicodecsv

Und (im Gegensatz zur ursprünglichen Frage) vorausgesetzt, Sie verwenden Pythons eingebautes csv Modul verwenden, verwandeln Sie
import csvsich
import unicodecsv as csvin Ihren Code.

Es ist sehr einfach für Python 3.x ( docs ).

import csv

with open('output_file_name', 'w', newline='', encoding='utf-8') as csv_file:
    writer = csv.writer(csv_file, delimiter=';')
    writer.writerow('my_utf8_string')

Informationen zu Python 2.x finden Sie hier .

Verwenden Sie dieses Paket, es funktioniert einfach: https://github.com/jdunck/python-unicodecsv .

Für mich hat die UnicodeWriterKlasse aus der Python 2 CSV-Moduldokumentation nicht wirklich funktioniert, da sie das brichtcsv.writer.write_row() Schnittstelle beschädigt.

Beispielsweise:

csv_writer = csv.writer(csv_file)
row = ['The meaning', 42]
csv_writer.writerow(row)

funktioniert, während:

csv_writer = UnicodeWriter(csv_file)
row = ['The meaning', 42]
csv_writer.writerow(row)

wird werfen AttributeError: 'int' object has no attribute 'encode'.

Da UnicodeWriteroffensichtlich erwartet wird, dass alle Spaltenwerte Zeichenfolgen sind, können wir die Werte selbst konvertieren und einfach das Standard-CSV-Modul verwenden:

def to_utf8(lst):
    return [unicode(elem).encode('utf-8') for elem in lst]

...
csv_writer.writerow(to_utf8(row))

Oder wir können sogar csv_writer mit einem Affen-Patch versehen, um eine write_utf8_rowFunktion hinzuzufügen - die Übung bleibt dem Leser überlassen.

Die Beispiele in der Python-Dokumentation zeigen, wie Unicode-CSV-Dateien geschrieben werden: http://docs.python.org/2/library/csv.html#examples

(Der Code kann hier nicht kopiert werden, da er urheberrechtlich geschützt ist.)

Für python2 können Sie diesen Code verwenden, bevor csv_writer.writerows(rows)
Dieser Code KEINE Ganzzahlen in utf-8-Zeichenfolgen konvertiert

def encode_rows_to_utf8 (Zeilen):
    encoded_rows = []
    für Reihe in Reihe:
        encoded_row = []
        für Wert in Zeile:
            if isinstance (Wert, Basisstring):
                value = Unicode (Wert) .encode ("utf-8")
            encoded_row.append (Wert)
        encoded_rows.append (encoded_row)
    return encoded_rows

Ein sehr einfacher Hack ist die Verwendung des JSON-Imports anstelle von CSV. Führen Sie beispielsweise anstelle von csv.writer Folgendes aus:

    fd = codecs.open(tempfilename, 'wb', 'utf-8')  
    for c in whatever :
        fd.write( json.dumps(c) [1:-1] )   # json dumps writes ["a",..]
        fd.write('\n')
    fd.close()

Grundsätzlich ist die json-formatierte Zeichenfolge angesichts der Liste der Felder in der richtigen Reihenfolge identisch mit einer CSV-Zeile, mit Ausnahme von [und] am Anfang bzw. Ende. Und json scheint in Python 2 gegenüber utf-8 robust zu sein. *