Wie ignoriere ich die erste Datenzeile bei der Verarbeitung von CSV-Daten?

Ich fordere Python auf, die Mindestanzahl aus einer Spalte mit CSV-Daten zu drucken, aber die oberste Zeile ist die Spaltennummer, und ich möchte nicht, dass Python die oberste Zeile berücksichtigt. Wie kann ich sicherstellen, dass Python die erste Zeile ignoriert?

Dies ist der bisherige Code:

import csv

with open('all16.csv', 'rb') as inf:
    incsv = csv.reader(inf)
    column = 1                
    datatype = float          
    data = (datatype(column) for row in incsv)   
    least_value = min(data)

print least_value

Können Sie auch erklären, was Sie tun, und nicht nur den Code angeben? Ich bin sehr, sehr neu in Python und möchte sicherstellen, dass ich alles verstehe.

Sie können eine Instanz der csvModulklasse verwenden Sniffer, um das Format einer CSV-Datei abzuleiten und festzustellen, ob eine Kopfzeile vorhanden ist, sowie die integrierte next()Funktion, um die erste Zeile nur bei Bedarf zu überspringen:

import csv

with open('all16.csv', 'r', newline='') as file:
    has_header = csv.Sniffer().has_header(file.read(1024))
    file.seek(0)  # Rewind.
    reader = csv.reader(file)
    if has_header:
        next(reader)  # Skip header row.
    column = 1
    datatype = float
    data = (datatype(row[column]) for row in reader)
    least_value = min(data)

print(least_value)

Da datatypeund columnin Ihrem Beispiel fest codiert sind, wäre es etwas schneller, Folgendes zu verarbeiten row:

    data = (float(row[1]) for row in reader)

Hinweis: Der obige Code gilt für Python 3.x. Verwenden Sie für Python 2.x die folgende Zeile, um die Datei anstelle der angezeigten zu öffnen:

with open('all16.csv', 'rb') as file:

Um die erste Zeile zu überspringen, rufen Sie einfach an:

next(inf)

Dateien in Python sind Iteratoren über Zeilen.

In einem ähnlichen Anwendungsfall musste ich nervige Zeilen vor der Zeile mit meinen tatsächlichen Spaltennamen überspringen. Diese Lösung hat gut funktioniert. Lesen Sie zuerst die Datei und übergeben Sie die Liste an csv.DictReader.

with open('all16.csv') as tmp:
    # Skip first line (if any)
    next(tmp, None)

    # {line_num: row}
    data = dict(enumerate(csv.DictReader(tmp)))

Aus dem Python-Kochbuch entlehnt , könnte
ein prägnanterer Vorlagencode folgendermaßen aussehen:

import csv
with open('stocks.csv') as f:
    f_csv = csv.reader(f) 
    headers = next(f_csv) 
    for row in f_csv:
        # Process row ...

Normalerweise wird verwendet, next(incsv)wodurch der Iterator um eine Zeile vorgerückt wird, sodass Sie den Header überspringen. Die andere (sagen wir, Sie wollten 30 Zeilen überspringen) wäre:

from itertools import islice
for row in islice(incsv, 30, None):
    # process

Verwenden Sie csv.DictReader anstelle von csv.Reader. Wenn der Parameter Feldnamen weggelassen wird, werden die Werte in der ersten Zeile der CSV-Datei als Feldnamen verwendet. Sie können dann mit Zeile ["1"] usw. auf Feldwerte zugreifen

Das neue 'Pandas'-Paket ist möglicherweise relevanter als' csv '. Der folgende Code liest eine CSV-Datei, interpretiert standardmäßig die erste Zeile als Spaltenüberschrift und ermittelt das Minimum über Spalten hinweg.

import pandas as pd

data = pd.read_csv('all16.csv')
data.min()

Nun, meine Mini-Wrapper-Bibliothek würde den Job auch machen.

>>> import pyexcel as pe
>>> data = pe.load('all16.csv', name_columns_by_row=0)
>>> min(data.column[1])

Wenn Sie wissen, um welchen Header-Spaltenindex es sich handelt, z. B. "Spalte 1", können Sie dies stattdessen tun:

>>> min(data.column["Column 1"])

Für mich ist es am einfachsten, die Reichweite zu nutzen.

import csv

with open('files/filename.csv') as I:
    reader = csv.reader(I)
    fulllist = list(reader)

# Starting with data skipping header
for item in range(1, len(fulllist)): 
    # Print each row using "item" as the index value
    print (fulllist[item])  

Da dies mit etwas zusammenhängt, das ich getan habe, werde ich es hier teilen.

Was ist, wenn wir nicht sicher sind, ob es einen Header gibt und Sie auch keine Lust haben, Sniffer und andere Dinge zu importieren?

Wenn Ihre Aufgabe grundlegend ist, z. B. Drucken oder Anhängen an eine Liste oder ein Array, können Sie einfach eine if-Anweisung verwenden:

# Let's say there's 4 columns
with open('file.csv') as csvfile:
     csvreader = csv.reader(csvfile)
# read first line
     first_line = next(csvreader)
# My headers were just text. You can use any suitable conditional here
     if len(first_line) == 4:
          array.append(first_line)
# Now we'll just iterate over everything else as usual:
     for row in csvreader:
          array.append(row)

Die Dokumentation zum Python 3 CSV-Modul enthält dieses Beispiel:

with open('example.csv', newline='') as csvfile:
    dialect = csv.Sniffer().sniff(csvfile.read(1024))
    csvfile.seek(0)
    reader = csv.reader(csvfile, dialect)
    # ... process CSV file contents here ...

Der Snifferwird versuchen, viele Dinge über die CSV-Datei automatisch zu erkennen. Sie müssen die has_header()Methode explizit aufrufen , um festzustellen, ob die Datei eine Kopfzeile enthält. Wenn dies der Fall ist, überspringen Sie die erste Zeile, wenn Sie die CSV-Zeilen durchlaufen. Sie können es so machen:

if sniffer.has_header():
    for header_row in reader:
        break
for data_row in reader:
    # do something with the row

Ich würde Schwanz verwenden , um die unerwünschte erste Zeile loszuwerden:

tail -n +2 $INFIL | whatever_script.py 

füge einfach [1:] hinzu

Beispiel unten:

data = pd.read_csv("/Users/xyz/Desktop/xyxData/xyz.csv", sep=',', header=None)**[1:]**

das funktioniert bei mir in iPython

Python 3.X.

Behandelt UTF8 BOM + HEADER

Es war ziemlich frustrierend, dass das csvModul den Header nicht leicht bekommen konnte, es gibt auch einen Fehler mit der UTF-8-Stückliste (erstes Zeichen in der Datei). Dies funktioniert bei mir nur mit dem csvModul:

import csv

def read_csv(self, csv_path, delimiter):
    with open(csv_path, newline='', encoding='utf-8') as f:
        # https://bugs.python.org/issue7185
        # Remove UTF8 BOM.
        txt = f.read()[1:]

    # Remove header line.
    header = txt.splitlines()[:1]
    lines = txt.splitlines()[1:]

    # Convert to list.
    csv_rows = list(csv.reader(lines, delimiter=delimiter))

    for row in csv_rows:
        value = row[INDEX_HERE]

Ich würde csvreader in list konvertieren und dann das erste Element einfügen

import csv        

with open(fileName, 'r') as csvfile:
        csvreader = csv.reader(csvfile)
        data = list(csvreader)               # Convert to list
        data.pop(0)                          # Removes the first row

        for row in data:
            print(row)

Python 2.x.

csvreader.next()

Geben Sie die nächste Zeile des iterierbaren Objekts des Lesers als Liste zurück, die gemäß dem aktuellen Dialekt analysiert wurde.

csv_data = csv.reader(open('sample.csv'))
csv_data.next() # skip first row
for row in csv_data:
    print(row) # should print second row

Python 3.x.

csvreader.__next__()

Geben Sie die nächste Zeile des iterierbaren Objekts des Lesers als Liste (wenn das Objekt von reader () zurückgegeben wurde) oder als Diktat (wenn es sich um eine DictReader-Instanz handelt) zurück, die gemäß dem aktuellen Dialekt analysiert wurde. Normalerweise sollten Sie dies als nächstes (Leser) bezeichnen.

csv_data = csv.reader(open('sample.csv'))
csv_data.__next__() # skip first row
for row in csv_data:
    print(row) # should print second row