NLP Academy · Oppitunti

Miksi konteksti muuttaa sanan merkitystä

Bank joen rannalla ja bank rahana

Oppitunti 1/413 vaihetta

Miksi konteksti muuttaa sanan merkitystä on ilmainen NLP Academy-oppitunti CoddyKitissä. Tämä on oppitunti 1/4. Voit lukea tästä oppimispolusta kokonaan mitkä tahansa 3 oppituntia ilmaiseksi — sen jälkeen CoddyKit PRO avaa kaikki oppitunnit sekä käytännön harjoittelun sisäänrakennetulla koodieditorilla ja ympäri vuorokauden toimivalla tekoälytuutorilla. Oppitunti kuuluu NLP Academy-oppimispolkuun, ja edistymisesi synkronoituu verkon ja CoddyKit-sovelluksen välillä. NLP Academy-kurssilla on yhteensä 4 oppituntia.

Yksi sana, monta merkitystä

Sana bank voi tarkoittaa joen rantaa tai paikkaa, jossa säilytetään rahaa. Sen merkitys riippuu täysin sitä ympäröivästä kontekstista.

Staattiset vektorit eivät riitä

word2vec ja GloVe antavat jokaiselle sanalle yhden kiinteän vektorin. Siksi bank saa yhden staattisen merkityksen riippumatta lauseesta, jossa se esiintyy.

Ongelman näkeminen

Nämä kaksi lausetta käyttävät sanaa bank vastakkaisilla tavoilla, mutta staattinen malli antaa sanalle silti täsmälleen saman vektorin.

s1 = "sit on the bank of the river"
s2 = "deposit cash at the bank"

Ihmiset lukevat kontekstia

Tiedätte heti, kumpaa bank-sanan merkitystä tarkoitetaan, koska luette ympäröivät sanat. Merkitys on kontekstissa, ei sanassa yksinään.

Kontekstuaaliset embeddingit

Kontekstuaalinen malli antaa bank-sanalle eri vektorin jokaisessa lauseessa. Embedding mukautuu nyt joka kerta sen kontekstiin. ✨

Tutustutaan BERTiin

BERT on transformer, joka lukee koko lauseen kerralla ja tuottaa kontekstia hyödyntäviä vektoreita. Sen toiminta perustuu kaikkien sanojen väliseen attentioniin.

Lukeminen molempiin suuntiin

BERT tarkastelee kunkin tokenin vasemmalla ja oikealla puolella olevia sanoja samanaikaisesti. Tätä kaksisuuntaista näkymää tarkoittaa sana bidirectional.

Sama token, uusi vektori

Kun syötätte BERTille sekä river- että money-lauseet, bankista saadaan kaksi erilaista vektoria. Embedding seuraa lauseen merkitystä.

Polysemia ratkaistu

Monimerkityksiset sanat eli polysemia aiheuttivat aiemmin staattisille malleille ongelmia. Kontekstuaaliset embeddingit erottavat nämä merkitykset viimein selkeästi.

Miksi sillä on merkitystä

Haku, kääntäminen ja kysymyksiin vastaaminen paranevat kaikki, kun malli ymmärtää aidosti, minkä merkityksen sana juuri nyt ilmaisee.

Suuri muutos

Siirtyminen yhdestä vektorista sanaa kohden yhteen vektoriin käyttökertaa kohden oli käännekohta. Tämä on nykyaikaisen NLP:n ydin.

Pikatarkistus

Miten kontekstuaaliset embeddingit eroavat staattisista?

Kertaus

Staattiset vektorit lukitsevat jokaisen sanan yhteen merkitykseen. BERTin kontekstuaaliset embeddingit muuttuvat lausekohtaisesti ja tavoittavat oikean merkityksen. ✅

Aloita maksutta

Opi Python tekoälytuutorin avulla — ilmaiseksi

Kirjoita ja suorita oikeaa koodia selaimessa, saa välitöntä apua tekoälytuutorilta ympäri vuorokauden ja jatka siitä, mihin jäit, verkossa tai sovelluksessa.

Kurssit
30
Oppitunnit
120

Usein kysytyt kysymykset

Onko oppitunti ”Miksi konteksti muuttaa sanan merkitystä” ilmainen?

Kyllä — voit lukea täällä verkossa kokonaan ilmaiseksi mitkä tahansa NLP Academy-oppimispolun 3 oppituntia, myös oppitunnin “Miksi konteksti muuttaa sanan merkitystä”. Sen jälkeen CoddyKit PRO avaa kaikki oppitunnit sekä interaktiiviset harjoitukset sisäänrakennetulla koodieditorilla ja ympäri vuorokauden toimivalla tekoälytuutorilla. NLP Academy-kurssilla on yhteensä 4 oppituntia.

Mitä opin oppitunnilla ”Miksi konteksti muuttaa sanan merkitystä”?

Bank joen rannalla ja bank rahana Harjoittelet NLP Academy-aihetta koodilla, jonka suoritat suoraan selaimessa. Ympäri vuorokauden käytettävissä oleva tekoälytuutori vastaa kysymyksiisi oppitunnin aikana.

Tarvitsenko kokemusta aloittaakseni NLP Academy-opiskelun?

Aiempi kokemus ei ole tarpeen. CoddyKitin NLP Academy-oppimispolku sopii vasta-alkajista edistyneisiin, joten voit aloittaa tästä tai alusta ja edetä omaan tahtiisi. Tämä on oppitunti 1/4.

Kuinka kauan ”Miksi konteksti muuttaa sanan merkitystä”-oppitunnin suorittaminen kestää?

Useimmat CoddyKitin oppitunnit kestävät noin 5–10 minuuttia. Jokainen oppitunti on lyhyt ja interaktiivinen, joten edistyt tasaisesti ja voit jatkaa siitä, mihin jäit – sekä verkossa että sovelluksessa.

Voinko kirjoittaa ja suorittaa koodia tällä NLP Academy-oppitunnilla?

Kyllä. Jokainen NLP Academy-oppitunti sisältää sisäänrakennetun koodieditorin, joten voit kirjoittaa ja suorittaa oikeaa koodia suoraan selaimessa ja saada välitöntä palautetta tekoälyltä – paikallista asennusta ei tarvita.

Kaikki tämän kurssin oppitunnit

  1. Miksi konteksti muuttaa sanan merkitystä
  2. Maskattu kielimallinnus
  3. Lauseiden upottaminen BERTillä
  4. Sopivan esikoulutetun mallin valitseminen
← Takaisin: NLP Academy