Dodawanie niestandardowych reguł encji
Wykrywaj terminy domenowe pomijane przez model
Dodawanie niestandardowych reguł encji to bezpłatna lekcja NLP Academy na CoddyKit. To lekcja 4 z 4. Możesz przeczytać całą lekcję poniżej za darmo — a potem ćwiczyć ją interaktywnie w przeglądarce z wbudowanym edytorem kodu i tutorem AI dostępnym 24/7. To część ścieżki edukacyjnej NLP Academy, a Twój postęp synchronizuje się między webem a aplikacją CoddyKit. Kurs NLP Academy zawiera 4 lekcji w sumie.
Gdy model nie rozpoznaje encji
Wstępnie wytrenowany model NER nie znał nazw Państwa produktów ani wewnętrznego żargonu. Reguły niestandardowe pozwalają wykrywać terminy, które model zawsze pomija. 🎯
Poznaj EntityRuler
EntityRuler biblioteki spaCy dodaje encje na podstawie zdefiniowanych wzorców, bez konieczności ponownego trenowania. Można go bezpośrednio podłączyć do potoku.
Dodaj go do potoku
Wstaw regułę za pomocą add_pipe. Umieszczenie jej przed ner sprawia, że Państwa reguły mają pierwszeństwo przed przewidywaniami modelu.
ruler = nlp.add_pipe("entity_ruler", before="ner")Wzorce są słownikami
Każda reguła jest słownikiem zawierającym label i wzorzec. Etykieta określa typ encji, który ma zostać przypisany dopasowanemu fragmentowi.
{"label": "PRODUCT", "pattern": "CoddyKit"}Dodaj własne wzorce
Przekaż listę słowników wzorców do ruler.add_patterns. Od tej pory te dokładne frazy będą za każdym razem oznaczane, gdy się pojawią.
ruler.add_patterns([{"label": "PRODUCT", "pattern": "CoddyKit"}])Wzorce oparte na tokenach
Oprócz zwykłych ciągów znaków wzorce mogą być listami tokenów, które dopasowują się na podstawie atrybutów, takich jak tekst zapisany małymi literami, zapewniając elastyczne reguły.
{"label": "ORG", "pattern": [{"LOWER": "acme"}]}Dopasowuj terminy wielowyrazowe
Wzorzec tokenów zawierający kilka elementów wykrywa frazy, dzięki czemu San Pedro Lab zostaje oznaczone jako jedna encja, a nie trzy słowa.
[{"LOWER": "san"}, {"LOWER": "pedro"}, {"LOWER": "lab"}]Reguły działają jako pierwsze
Ponieważ reguła znajduje się przed ner, Państwa niestandardowe etykiety wygrywają w przypadku konfliktu, a model nadal obsługuje wszystkie pozostałe elementy.
Przetestuj reguły
Przepuść zdanie przez zaktualizowany potok i przeiteruj po doc.ents, aby potwierdzić, że nowe terminy mają teraz właściwą etykietę.
doc = nlp("We shipped CoddyKit today.")
# CoddyKit -> PRODUCTZapisz wzorce
Eksportuj reguły na dysk za pomocą to_disk, aby cały zespół mógł ponownie używać tych samych niestandardowych encji zamiast definiować je od nowa.
ruler.to_disk("patterns.jsonl")Reguły i uczenie
Reguły niestandardowe to szybki pierwszy krok. Później można trenować model na oznaczonych przykładach, aby obsługiwać trudne, niejednoznaczne przypadki. 🚀
Szybkie sprawdzenie
Jak sprawić, aby reguły niestandardowe zastępowały model?
Powtórzenie
EntityRuler dodaje encje na podstawie wzorców ciągów znaków lub tokenów, działa przed ner i zapisuje reguły na dysku do ponownego użycia. ✅
Często zadawane pytania
Czy lekcja „Dodawanie niestandardowych reguł encji” jest bezpłatna?
Tak — pełny tekst „Dodawanie niestandardowych reguł encji” jest dostępny za darmo tutaj w sieci. Aby ćwiczyć ją interaktywnie (wbudowany edytor kodu i tutor AI dostępny 24/7) i odblokować resztę kursu NLP Academy, przejdź na CoddyKit PRO. Kurs NLP Academy zawiera 4 lekcji w sumie.
Co nauczysz się w „Dodawanie niestandardowych reguł encji”?
Wykrywaj terminy domenowe pomijane przez model Ćwiczysz NLP Academy z praktycznym kodem, który uruchamiasz bezpośrednio w przeglądarce, a tutor AI dostępny 24/7 odpowiada na Twoje pytania podczas pracy nad lekcją.
Czy potrzebuję doświadczenia, aby zacząć NLP Academy?
Nie wymagamy żadnego doświadczenia. NLP Academy w CoddyKit jest strukturyzowany dla początkujących i zaawansowanych użytkowników, więc możesz zacząć tutaj lub od początku i uczyć się w swoim tempie. To lekcja 4 z 4.
Ile czasu zajmuje lekcja „Dodawanie niestandardowych reguł encji”?
Większość lekcji CoddyKit trwa około 5–10 minut. Każda lekcja to mały, interaktywny krok, dzięki czemu robisz systematyczne postępy i zawsze wracasz dokładnie do tego samego miejsca — na webie i w aplikacji.
Czy mogę pisać i uruchamiać kod w tej lekcji NLP Academy?
Tak. Każda lekcja NLP Academy zawiera wbudowany edytor kodu, więc piszesz i uruchamiasz prawdziwy kod bezpośrednio w przeglądarce i od razu otrzymujesz sprzężenie zwrotne od AI — bez konfiguracji na komputerze.
Wszystkie lekcje w tym kursie
- Co uznajemy za encję?
- Wyodrębnianie encji za pomocą spaCy
- Wizualizacja encji za pomocą displaCy
- Dodawanie niestandardowych reguł encji