DevOps-bootcamp · Les

Gegevens sorteren en ontdubbelen (sort, uniq, cut)

Zet onbewerkte tekst om in schone, geordende gegevens. Leer regels sorteren, duplicaten verwijderen met uniq en kolommen extraheren met cut, en koppel deze opdrachten vervolgens in pipelines.

Les 4 van 413 stappen

Gegevens sorteren en ontdubbelen (sort, uniq, cut) is een gratis DevOps-bootcamp-les op CoddyKit. Dit is les 4 van 4. Je kunt 3 lessen uit dit leerpad gratis volledig lezen — daarna ontgrendelt CoddyKit PRO alle lessen, plus praktische oefeningen met een ingebouwde code-editor en een AI-tutor die 24/7 beschikbaar is. Deze les maakt deel uit van het leertraject DevOps-bootcamp. Je voortgang wordt gesynchroniseerd op het web en in de CoddyKit-app. De cursus DevOps-bootcamp bevat in totaal 4 lessen.

Tekstgegevens vormgeven

Logbestanden en CSV-bestanden zijn slechts regels tekst. Drie klassieke hulpmiddelen geven ze vorm: sort ordent regels, uniq verwijdert duplicaten en cut haalt kolommen eruit.

Basis sorteren

sort ordent regels standaard alfabetisch en drukt het resultaat af.

sort names.txt

Numeriek sorteren

Een gewone sorteerbewerking behandelt getallen als tekst (10 vóór 2). Gebruik -n voor een echte numerieke volgorde en -r om de volgorde om te keren.

sort -n sizes.txt
sort -nr sizes.txt   # largest first

Sorteren op een veld

Gebruik -k om op een specifieke kolom te sorteren en -t om het scheidingsteken in te stellen.

sort -t: -k3 -n /etc/passwd   # by UID

Duplicaten verwijderen met uniq

uniq voegt aangrenzende dubbele regels samen. Het werkt alleen op gesorteerde invoer en wordt daarom bijna altijd gecombineerd met sort.

sort access.log | uniq

Voorkomens tellen

uniq -c zet voor elke regel het aantal voorkomens ervoor — ideaal voor frequentieanalyse.

sort ips.txt | uniq -c

Meest voorkomende items vinden

Combineer sort, uniq -c en nog een sorteerbewerking om items op frequentie te rangschikken — een rapport met de "top N" in één regel.

sort ips.txt | uniq -c | sort -nr | head -5

Kolommen extraheren met cut

cut haalt velden uit elke regel. Gebruik -d voor het scheidingsteken en -f voor de veldnummers.

cut -d, -f1,3 data.csv   # 1st and 3rd columns

Op teken knippen

cut -c haalt tekenbereiken op basis van hun positie eruit; dit is nuttig voor gegevens met een vaste breedte.

cut -c1-8 dates.txt   # first 8 chars

Unieke versus dubbele regels

uniq -d toont alleen regels die worden herhaald, terwijl uniq -u alleen regels toont die precies één keer voorkomen.

sort orders.txt | uniq -d   # repeated only

Een pijplijn bouwen

De echte kracht zit in het koppelen: haal een kolom eruit, sorteer deze en tel vervolgens de unieke waarden om een gegevensset met één opdracht samen te vatten.

cut -d, -f2 sales.csv | sort | uniq -c | sort -nr

Korte controle

Test uw begrip.

Samenvatting

U hebt geleerd gegevens vorm te geven met sort (alfabetisch, numeriek met -n, op veld met -k), uniq (aangrenzende regels ontdubbelen, -c tellen, -d/-u) en cut (velden met -d/-f, tekens met -c) — gekoppeld in krachtige pijplijnen.

Gratis beginnen

Leer DevOps-bootcamp met een AI-tutor — gratis

Schrijf echte code en voer die uit in je browser, krijg direct hulp van een AI-tutor die 24/7 beschikbaar is en ga verder waar je gebleven bent op het web of in de app.

Cursussen
142
Lessen
568

Veelgestelde vragen

Is de les “Gegevens sorteren en ontdubbelen (sort, uniq, cut)” gratis?

Ja — je kunt hier op het web alle 3 lessen van het leerpad DevOps-bootcamp, waaronder “Gegevens sorteren en ontdubbelen (sort, uniq, cut)”, gratis volledig lezen. Daarna ontgrendelt CoddyKit PRO alle lessen, plus interactieve oefeningen met een ingebouwde code-editor en een AI-tutor die 24/7 beschikbaar is. De cursus DevOps-bootcamp bevat in totaal 4 lessen.

Wat leer ik in “Gegevens sorteren en ontdubbelen (sort, uniq, cut)”?

Zet onbewerkte tekst om in schone, geordende gegevens. Leer regels sorteren, duplicaten verwijderen met uniq en kolommen extraheren met cut, en koppel deze opdrachten vervolgens in pipelines. Je oefent met DevOps-bootcamp door code rechtstreeks in de browser uit te voeren. Een AI-begeleider die 24/7 beschikbaar is beantwoordt je vragen terwijl je de les doorwerkt.

Heb ik ervaring nodig om met DevOps-bootcamp te beginnen?

Ervaring vooraf is niet nodig. DevOps-bootcamp op CoddyKit is opgebouwd voor beginners tot gevorderden, zodat je hier of bij het begin kunt starten en in je eigen tempo kunt leren. Dit is les 4 van 4.

Hoe lang duurt de les “Gegevens sorteren en ontdubbelen (sort, uniq, cut)”?

De meeste lessen van CoddyKit duren ongeveer 5–10 minuten. Elke les is kort en interactief, zodat je gestaag vooruitgaat en op het web en in de app precies verdergaat waar je was gebleven.

Kan ik code schrijven en uitvoeren in deze les over DevOps-bootcamp?

Ja. Elke les over DevOps-bootcamp bevat een ingebouwde code-editor, zodat je rechtstreeks in je browser echte code kunt schrijven en uitvoeren en direct feedback van AI krijgt — lokale installatie is niet nodig.

Alle lessen in deze cursus

  1. Geavanceerde tekstbewerking (sed, awk)
  2. Archiveren en comprimeren (tar, gzip, unzip)
  3. Schijfgebruik en systeeminformatie (df, du, uname)
  4. Gegevens sorteren en ontdubbelen (sort, uniq, cut)
← Terug naar DevOps-bootcamp