NLP Academy · Pelajaran

Lawatan ke Pustaka Transformers

Model, pembuat token dan saluran paip

Pelajaran 1 daripada 413 langkah

Lawatan ke Pustaka Transformers ialah pelajaran NLP Academy percuma di CoddyKit. Ini ialah pelajaran 1 daripada 4. Sebanyak 3 pelajaran dalam laluan pembelajaran ini boleh dibaca sepenuhnya secara percuma — selepas itu, CoddyKit PRO membuka akses kepada semua pelajaran, serta latihan praktikal dengan penyunting kod terbina dalam dan tutor kecerdasan buatan yang tersedia 24/7. Pelajaran ini merupakan sebahagian daripada laluan pembelajaran NLP Academy, dan kemajuan anda disegerakkan merentas web serta aplikasi CoddyKit. Kursus NLP Academy merangkumi sejumlah 4 pelajaran.

Kenali Transformers

Hugging Face Transformers ialah pustaka Python pilihan utama untuk menggunakan dan menala halus model bahasa tercanggih dengan kod yang sangat sedikit. 🤗

Hanya Perlu Satu Pemasangan

Anda menambahkan pustaka itu ke projek dengan satu perintah pip, lalu ribuan model pralatih boleh digunakan.

pip install transformers

Tiga Tiang Utama

Hampir semua perkara yang anda lakukan bergantung pada tiga blok binaan: model, tokenizer dan saluran paip peringkat tinggi yang menghubungkan semuanya.

Apakah Itu Model

Model menyimpan berat yang dipelajari oleh transformer seperti BERT atau GPT. Model ini menukarkan nombor input kepada ramalan seperti label atau teks.

Perkara yang Dilakukan Tokenizer

Tokenizer menukarkan teks mentah anda kepada id integer yang dijangka oleh model, dan menukarkan output kembali kepada teks yang boleh dibaca.

Saluran Paip Menyembunyikan Pendawaian

Saluran paip menggabungkan tokenizer dan model menjadi satu objek yang boleh dipanggil, supaya anda boleh menjalankan tugas dalam satu baris tanpa persediaan manual.

from transformers import pipeline
clf = pipeline("sentiment-analysis")

Jalankan Tugas Pertama Anda

Setelah dibina, anda memanggil saluran paip seperti fungsi dan ia mengembalikan hasil yang kemas bersama label dan skor keyakinan.

print(clf("I love this library!"))

Model Hub

Hugging Face Hub mengehoskan model yang dikongsi dan boleh anda muatkan menggunakan nama, jadi anda jarang perlu melatih apa-apa dari awal.

Kelas Auto

Pembantu seperti AutoModel dan AutoTokenizer memilih kelas yang betul untuk setiap titik semak, jadi satu baris kod boleh digunakan merentas banyak reka bentuk.

from transformers import AutoTokenizer
tok = AutoTokenizer.from_pretrained("bert-base-uncased")

Tugas yang Tersedia Secara Langsung

Saluran paip menyokong banyak tugas terus dari awal: pengelasan, pengecaman entiti bernama, peringkasan, terjemahan dan jawapan soalan.

Daripada Menggunakan kepada Menyesuaikan

Saluran paip bagus untuk mencuba model, tetapi untuk menjadikannya benar-benar milik anda, anda perlu menala halus model itu menggunakan data anda sendiri kemudian dalam kursus ini.

Semakan Pantas

Bahagian manakah yang menukarkan teks mentah kepada id integer yang boleh dibaca oleh model?

Jawab dalam pelajaran interaktif

Ringkasan

Transformers memberikan anda model, tokenizer dan saluran paip. Muatkan titik semak daripada Hub dan jalankan tugas NLP sebenar hanya dalam beberapa baris. ✅

Percuma untuk bermula

Pelajari Python dengan tutor kecerdasan buatan — percuma

Tulis dan jalankan kod sebenar dalam pelayar anda, dapatkan bantuan segera daripada tutor kecerdasan buatan yang tersedia 24/7, dan sambung semula dari tempat anda berhenti di web atau dalam aplikasi.

Kursus: 30
Pelajaran: 120

Mula belajar secara percuma Lihat kursus penuh

Soalan Lazim

Adakah pelajaran “Lawatan ke Pustaka Transformers” percuma?

Ya — sebanyak 3 pelajaran dalam laluan pembelajaran NLP Academy, termasuk “Lawatan ke Pustaka Transformers”, boleh dibaca sepenuhnya secara percuma di web ini. Selepas itu, CoddyKit PRO membuka akses kepada semua pelajaran, serta latihan interaktif dengan penyunting kod terbina dalam dan tutor kecerdasan buatan yang tersedia 24/7. Kursus NLP Academy merangkumi sejumlah 4 pelajaran.

Apakah yang akan saya pelajari dalam “Lawatan ke Pustaka Transformers”?

Model, pembuat token dan saluran paip Anda berlatih NLP Academy menggunakan kod praktikal yang dijalankan terus dalam pelayar, manakala tutor kecerdasan buatan 24/7 menjawab soalan anda semasa anda mengikuti pelajaran.

Adakah saya memerlukan pengalaman untuk memulakan NLP Academy?

Tiada pengalaman terdahulu diperlukan. Pembelajaran NLP Academy di CoddyKit disusun untuk pelajar daripada peringkat pemula hingga lanjutan, jadi anda boleh bermula di sini atau dari awal dan belajar mengikut kadar anda sendiri. Ini ialah pelajaran 1 daripada 4.

Berapa lamakah pelajaran “Lawatan ke Pustaka Transformers” diambil?

Kebanyakan pelajaran CoddyKit mengambil masa kira-kira 5–10 minit. Setiap pelajaran ringkas dan interaktif, jadi anda boleh membuat kemajuan secara berterusan dan menyambung tepat dari tempat anda berhenti di web atau aplikasi.

Bolehkah saya menulis dan menjalankan kod dalam pelajaran NLP Academy ini?

Ya. Setiap pelajaran NLP Academy menyertakan penyunting kod terbina dalam, jadi anda boleh menulis dan menjalankan kod sebenar terus dalam pelayar serta menerima maklum balas kecerdasan buatan serta-merta — tanpa memerlukan persediaan setempat.

Semua pelajaran dalam kursus ini

← Kembali ke NLP Academy