CSV-tiedostojen käsittely

CSV-tiedostot (Comma-Separated Values) ovat yleinen muoto taulukkomuotoisten tietojen tallentamiseen. Python tarjoaa csv-moduulin CSV-tiedostojen tehokkaaseen lukemiseen, kirjoittamiseen ja käsittelyyn.

Tässä oppitunnissa opit käsittelemään CSV-tiedostoja Pythonin sisäänrakennetun csv-moduulin avulla.

CSV-tiedostot ovat tekstitiedostoja, joissa erotinta (yleensä pilkkua) käytetään arvojen erottamiseen. Jokainen rivi edustaa tietoriviä, ja jokainen rivin arvo edustaa saraketta.

Voit lukea CSV-tiedoston käyttämällä csv.reader-funktiota. Tämä funktio lukee jokaisen rivin arvoluettelona:

# Reading a CSV file
import csv

with open("data.csv", "r") as file:
    reader = csv.reader(file)
    for row in reader:
        print(row)  # Each row is a list of values

Voit kirjoittaa CSV-tiedostoon käyttämällä csv.writer-funktiota. Tämän funktion avulla voit kirjoittaa rivejä CSV-tiedostoon:

# Writing to a CSV file
import csv

with open("output.csv", "w", newline="") as file:
    writer = csv.writer(file)
    writer.writerow(["Name", "Age", "City"])
    writer.writerow(["Alice", 30, "New York"])
    writer.writerow(["Bob", 25, "London"])

csv.DictReader-funktion avulla voit lukea CSV-tiedostoja sanakirjoiksi, joissa avaimina ovat sarakeotsikot:

# Reading a CSV file with headers
import csv

with open("data.csv", "r") as file:
    reader = csv.DictReader(file)
    for row in reader:
        print(row)  # Each row is a dictionary with column headers as keys

csv.DictWriter-funktion avulla voit kirjoittaa sanakirjoja otsikoilla varustettuihin CSV-tiedostoihin:

# Writing a CSV file with headers
import csv

with open("output.csv", "w", newline="") as file:
    fieldnames = ["Name", "Age", "City"]
    writer = csv.DictWriter(file, fieldnames=fieldnames)

    writer.writeheader()  # Write the header row
    writer.writerow({"Name": "Alice", "Age": 30, "City": "New York"})
    writer.writerow({"Name": "Bob", "Age": 25, "City": "London"})

Voit määrittää mukautetun erottimen CSV-tiedostoja lukiessasi tai kirjoittaessasi. Esimerkiksi sarkainerotelluissa tiedostoissa erottimena käytetään sarkainta (\t):

# Using a custom delimiter
import csv

with open("data.tsv", "r") as file:
    reader = csv.reader(file, delimiter="\t")
    for row in reader:
        print(row)  # Each row is split by tab

Käytä suurten CSV-tiedostojen käsittelyssä silmukkaa, joka käsittelee rivejä vaiheittain sen sijaan, että koko tiedosto ladattaisiin muistiin:

# Reading a large CSV file efficiently
import csv

with open("large_data.csv", "r") as file:
    reader = csv.reader(file)
    for row in reader:
        # Process each row
        print(row)

Vältä seuraavia virheitä:

• newline=""-asetuksen käyttämisen unohtaminen CSV-tiedostoja Windowsissa kirjoitettaessa.
• Virheellisten erottimien käyttäminen epästandardeissa CSV-tiedostoissa.
• Tiedoston puuttuvien tai virheellisesti muotoiltujen tietojen käsittelemättä jättäminen.

Tässä oppitunnissa opit:

• Miten CSV-tiedostoja luetaan ja kirjoitetaan Pythonin csv-moduulin avulla.
• Miten otsikoita sisältäviä CSV-tiedostoja käsitellään DictReader- ja DictWriter-toimintojen avulla.
• Miten suuria CSV-tiedostoja käsitellään tehokkaasti.

Hienosti tehty! Siirrytään seuraavaan aiheeseen.