NLP Academy · Lekcja

Tworzenie pierwszej tabeli częstości słów

Policz, jak często pojawia się każde słowo

Lekcja 4 z 413 kroki

Tworzenie pierwszej tabeli częstości słów to bezpłatna lekcja NLP Academy na CoddyKit. To lekcja 4 z 4. Możesz przeczytać całą lekcję poniżej za darmo — a potem ćwiczyć ją interaktywnie w przeglądarce z wbudowanym edytorem kodu i tutorem AI dostępnym 24/7. To część ścieżki edukacyjnej NLP Academy, a Twój postęp synchronizuje się między webem a aplikacją CoddyKit. Kurs NLP Academy zawiera 4 lekcji w sumie.

Czym jest tabela częstości?

Tabela częstości przyporządkowuje każdemu słowu liczbę jego wystąpień. To podstawa niemal każdej analizy tekstu. 📊

Zacznij od tokenów

Najpierw przekształć tekst w listę słów, a następnie zamień je na małe litery, aby The i the były zliczane jako ten sam token.

words = text.lower().split()

Zliczanie za pomocą słownika

Pythonowy słownik przechowuje pary słowo–liczba wystąpień. Przechodzą Państwo po słowach i za każdym razem zwiększają licznik o jeden.

freq = {}
for w in words:
    freq[w] = freq.get(w, 0) + 1

Sztuczka z get

Użycie get z wartością domyślną zero zapobiega błędom, gdy słowo pojawia się po raz pierwszy. Dzięki temu pętla pozostaje przejrzysta.

freq[w] = freq.get(w, 0) + 1

Counter zrobi to za Państwa

Klasa Counter z modułu collections tworzy całą tabelę w jednym wierszu, bez konieczności ręcznego pisania pętli.

from collections import Counter
freq = Counter(words)

Wyszukiwanie słowa

Po utworzeniu tabeli odczytanie liczby wystąpień jest natychmiastowe. Wystarczy użyć słowa jako indeksu, aby otrzymać jego częstość.

print(freq["the"])  # how many times the appears

Znajdowanie najczęstszych słów

Metoda most_common klasy Counter zwraca najczęstsze słowa wraz z ich licznościami, już posortowane od największej do najmniejszej.

print(freq.most_common(3))

Dominacja słów funkcyjnych

Początek niemal każdej tabeli zajmują słowa funkcyjne, takie jak the, of i a. Występują często, ale mają niewielkie znaczenie.

Sortowanie własnego słownika

Aby uszeregować zwykły dict, należy posortować jego elementy według wartości. Funkcja sorted z parametrem key pozwala uzyskać odpowiednią kolejność.

ranked = sorted(freq.items(), key=lambda x: x[1], reverse=True)

Częstości zasilają funkcje

Ta tabela jest podstawą reprezentacji bag-of-words, w której liczności słów stają się liczbami odczytywanymi przez modele uczenia maszynowego.

Pętla wyświetlająca tabelę

Przejście po elementach pozwala wyświetlić każde słowo obok jego liczności, zapewniając czytelne podsumowanie dokumentu.

for word, n in freq.items():
    print(word, n)

Szybkie sprawdzenie

Wybierz najszybszy sposób utworzenia tabeli liczności słów.

Podsumowanie: tabela częstości

Utworzyli Państwo tabelę częstości za pomocą dict lub Counter, uszeregowali najczęstsze słowa i zobaczyli, jak liczności zasilają funkcje bag-of-words. 🎉

Bezpłatny start

Ucz się Python dzięki korepetycjom AI — za darmo

Pisz i uruchamiaj kod w przeglądarce, otrzymuj natychmiastową pomoc od korepetytora AI dostępnego 24/7 i kontynuuj naukę w sieci lub w aplikacji.

Kursy
30
Lekcje
120

Często zadawane pytania

Czy lekcja „Tworzenie pierwszej tabeli częstości słów” jest bezpłatna?

Tak — pełny tekst „Tworzenie pierwszej tabeli częstości słów” jest dostępny za darmo tutaj w sieci. Aby ćwiczyć ją interaktywnie (wbudowany edytor kodu i tutor AI dostępny 24/7) i odblokować resztę kursu NLP Academy, przejdź na CoddyKit PRO. Kurs NLP Academy zawiera 4 lekcji w sumie.

Co nauczysz się w „Tworzenie pierwszej tabeli częstości słów”?

Policz, jak często pojawia się każde słowo Ćwiczysz NLP Academy z praktycznym kodem, który uruchamiasz bezpośrednio w przeglądarce, a tutor AI dostępny 24/7 odpowiada na Twoje pytania podczas pracy nad lekcją.

Czy potrzebuję doświadczenia, aby zacząć NLP Academy?

Nie wymagamy żadnego doświadczenia. NLP Academy w CoddyKit jest strukturyzowany dla początkujących i zaawansowanych użytkowników, więc możesz zacząć tutaj lub od początku i uczyć się w swoim tempie. To lekcja 4 z 4.

Ile czasu zajmuje lekcja „Tworzenie pierwszej tabeli częstości słów”?

Większość lekcji CoddyKit trwa około 5–10 minut. Każda lekcja to mały, interaktywny krok, dzięki czemu robisz systematyczne postępy i zawsze wracasz dokładnie do tego samego miejsca — na webie i w aplikacji.

Czy mogę pisać i uruchamiać kod w tej lekcji NLP Academy?

Tak. Każda lekcja NLP Academy zawiera wbudowany edytor kodu, więc piszesz i uruchamiasz prawdziwy kod bezpośrednio w przeglądarce i od razu otrzymujesz sprzężenie zwrotne od AI — bez konfiguracji na komputerze.

Wszystkie lekcje w tym kursie

  1. Ciągi, znaki i kodowania
  2. Wczytywanie plików tekstowych do Pythona
  3. Liczenie słów i znaków
  4. Tworzenie pierwszej tabeli częstości słów
← Powrót do NLP Academy