Mengisih dan Membuang Pendua Data (sort, uniq, cut)
Tukarkan teks mentah kepada data yang bersih dan tersusun. Pelajari cara mengisih baris, membuang pendua dengan uniq dan mengekstrak lajur dengan cut, kemudian merangkaikannya dalam saluran paip.
Mengisih dan Membuang Pendua Data (sort, uniq, cut) ialah pelajaran Kem Intensif DevOps percuma di CoddyKit. Ini ialah pelajaran 4 daripada 4. Sebanyak 3 pelajaran dalam laluan pembelajaran ini boleh dibaca sepenuhnya secara percuma — selepas itu, CoddyKit PRO membuka akses kepada semua pelajaran, serta latihan praktikal dengan penyunting kod terbina dalam dan tutor kecerdasan buatan yang tersedia 24/7. Pelajaran ini merupakan sebahagian daripada laluan pembelajaran Kem Intensif DevOps, dan kemajuan anda disegerakkan merentas web serta aplikasi CoddyKit. Kursus Kem Intensif DevOps merangkumi sejumlah 4 pelajaran.
Membentuk Data Teks
Fail log dan CSV hanyalah baris teks. Tiga alat klasik membentuknya: sort menyusun baris, uniq membuang pendua dan cut mengekstrak lajur.
Pengisihan Asas
sort menyusun baris mengikut abjad secara lalai dan mencetak hasilnya.
sort names.txtPengisihan Berangka
Pengisihan biasa menganggap nombor sebagai teks (10 sebelum 2). Gunakan -n untuk susunan berangka sebenar dan -r untuk menterbalikkannya.
sort -n sizes.txt
sort -nr sizes.txt # largest firstMengisih Mengikut Medan
Gunakan -k untuk mengisih mengikut lajur tertentu dan -t untuk menetapkan pembatas.
sort -t: -k3 -n /etc/passwd # by UIDMembuang Pendua dengan uniq
uniq menggabungkan baris pendua yang bersebelahan. Ia hanya berfungsi pada input yang telah diisih, jadi perintah ini hampir sentiasa digandingkan dengan sort.
sort access.log | uniqMengira Kejadian
uniq -c menambahkan awalan pada setiap baris dengan bilangan kemunculannya — sesuai untuk analisis kekerapan.
sort ips.txt | uniq -cMencari Item Teratas
Gabungkan sort, uniq -c dan satu lagi sort untuk menyusun kedudukan item mengikut kekerapan — laporan "N teratas" dalam satu baris.
sort ips.txt | uniq -c | sort -nr | head -5Mengekstrak Lajur dengan cut
cut mengambil medan daripada setiap baris. Gunakan -d untuk pembatas dan -f untuk nombor medan.
cut -d, -f1,3 data.csv # 1st and 3rd columnsMemotong Mengikut Aksara
cut -c mengekstrak julat aksara mengikut kedudukan, berguna untuk data lebar tetap.
cut -c1-8 dates.txt # first 8 charsBaris Unik berbanding Baris Pendua
uniq -d hanya memaparkan baris yang berulang, manakala uniq -u hanya memaparkan baris yang muncul tepat sekali.
sort orders.txt | uniq -d # repeated onlyMembina Saluran Paip
Kuasa sebenar terletak pada rantaian: ekstrak satu lajur, isih lajur itu, kemudian kira nilai unik untuk meringkaskan set data dalam satu perintah.
cut -d, -f2 sales.csv | sort | uniq -c | sort -nrSemakan Pantas
Uji pemahaman anda.
Ringkasan
Anda telah mempelajari cara membentuk data dengan sort (abjad, berangka -n, mengikut medan -k), uniq (buang pendua baris bersebelahan, kiraan -c, -d/-u) dan cut (medan dengan -d/-f, aksara dengan -c) — dirantaikan menjadi saluran paip yang berkuasa.
Pelajari Kem Intensif DevOps dengan tutor kecerdasan buatan — percuma
Tulis dan jalankan kod sebenar dalam pelayar anda, dapatkan bantuan segera daripada tutor kecerdasan buatan yang tersedia 24/7, dan sambung semula dari tempat anda berhenti di web atau dalam aplikasi.
- Kursus
- 142
- Pelajaran
- 568
Soalan Lazim
Adakah pelajaran “Mengisih dan Membuang Pendua Data (sort, uniq, cut)” percuma?
Ya — sebanyak 3 pelajaran dalam laluan pembelajaran Kem Intensif DevOps, termasuk “Mengisih dan Membuang Pendua Data (sort, uniq, cut)”, boleh dibaca sepenuhnya secara percuma di web ini. Selepas itu, CoddyKit PRO membuka akses kepada semua pelajaran, serta latihan interaktif dengan penyunting kod terbina dalam dan tutor kecerdasan buatan yang tersedia 24/7. Kursus Kem Intensif DevOps merangkumi sejumlah 4 pelajaran.
Apakah yang akan saya pelajari dalam “Mengisih dan Membuang Pendua Data (sort, uniq, cut)”?
Tukarkan teks mentah kepada data yang bersih dan tersusun. Pelajari cara mengisih baris, membuang pendua dengan uniq dan mengekstrak lajur dengan cut, kemudian merangkaikannya dalam saluran paip. Anda berlatih Kem Intensif DevOps menggunakan kod praktikal yang dijalankan terus dalam pelayar, manakala tutor kecerdasan buatan 24/7 menjawab soalan anda semasa anda mengikuti pelajaran.
Adakah saya memerlukan pengalaman untuk memulakan Kem Intensif DevOps?
Tiada pengalaman terdahulu diperlukan. Pembelajaran Kem Intensif DevOps di CoddyKit disusun untuk pelajar daripada peringkat pemula hingga lanjutan, jadi anda boleh bermula di sini atau dari awal dan belajar mengikut kadar anda sendiri. Ini ialah pelajaran 4 daripada 4.
Berapa lamakah pelajaran “Mengisih dan Membuang Pendua Data (sort, uniq, cut)” diambil?
Kebanyakan pelajaran CoddyKit mengambil masa kira-kira 5–10 minit. Setiap pelajaran ringkas dan interaktif, jadi anda boleh membuat kemajuan secara berterusan dan menyambung tepat dari tempat anda berhenti di web atau aplikasi.
Bolehkah saya menulis dan menjalankan kod dalam pelajaran Kem Intensif DevOps ini?
Ya. Setiap pelajaran Kem Intensif DevOps menyertakan penyunting kod terbina dalam, jadi anda boleh menulis dan menjalankan kod sebenar terus dalam pelayar serta menerima maklum balas kecerdasan buatan serta-merta — tanpa memerlukan persediaan setempat.
Semua pelajaran dalam kursus ini
- Manipulasi Teks Lanjutan (sed, awk)
- Pengarkiban dan Pemampatan (tar, gzip, unzip)
- Penggunaan Cakera dan Maklumat Sistem (df, du, uname)
- Mengisih dan Membuang Pendua Data (sort, uniq, cut)