NLP Academy · Oppitunti

Tiivistäminen Seq2Seq-mallilla

Suorita abstraktiivinen tiivistäjä

Oppitunti 2/413 vaihetta

Tiivistäminen Seq2Seq-mallilla on ilmainen NLP Academy-oppitunti CoddyKitissä. Tämä on oppitunti 2/4. Voit lukea tästä oppimispolusta kokonaan mitkä tahansa 3 oppituntia ilmaiseksi — sen jälkeen CoddyKit PRO avaa kaikki oppitunnit sekä käytännön harjoittelun sisäänrakennetulla koodieditorilla ja ympäri vuorokauden toimivalla tekoälytuutorilla. Oppitunti kuuluu NLP Academy-oppimispolkuun, ja edistymisesi synkronoituu verkon ja CoddyKit-sovelluksen välillä. NLP Academy-kurssilla on yhteensä 4 oppituntia.

Mikä on Seq2Seq?

seq2seq-malli muuntaa yhden sanasarjan toiseksi. Kun sille syötetään pitkä artikkeli, se tuottaa lyhyemmän sarjan eli tiivistelmän. 🔁

Encoder ja decoder

Seq2seq koostuu kahdesta osasta. Encoder lukee ja tiivistää syötteen, ja decoder kirjoittaa tuloksen yksi token kerrallaan.

Luotu tekstin tuottamiseen

Koska decoder kirjoittaa uusia tokeneita, seq2seq-mallit ovat luonnostaan abstraktiivisia. Ne muotoilevat tekstin uudelleen eivätkä kopioi sitä, joten tiivistelmistä tulee sujuvia.

Suosittuja tiivistimiä

BARTin, T5:n ja Pegasuksen kaltaiset mallit ovat tiivistämiseen rakennettuja esikoulutettuja seq2seq-transformereita. Voit käyttää niitä kouluttamatta omaa malliasi.

Helppo tapa: pipeline

Hugging Face kokoaa kaiken pipelineen. Yksi rivi lataa tiivistämiseen valmiin mallin ja tokenoijan.

from transformers import pipeline
summarizer = pipeline("summarization")

Ensimmäisen tiivistelmän suorittaminen

Anna tekstisi pipelinelle ja lue tulos. Malli palauttaa luettelon, jossa on tuotettu summary_text.

out = summarizer(article, max_length=60, min_length=20)
print(out[0]["summary_text"])

Pituuden hallitseminen

Rajoita tuloksen kokoa asetuksilla max_length ja min_length. Tiukemmat rajat pakottavat tuottamaan lyhyemmän ja ytimekkäämmän tiivistelmän.

Huomioi syötteen rajoitus

Jokaisella mallilla on syötteen enimmäiskoko, usein noin 1024 tokenia. Pidemmät asiakirjat on ensin pilkottava tai typistettävä.

Ahne haku ja beam search

Decoder voi valita yhden parhaan seuraavan tokenin tai tutkia useita polkuja beam search-menetelmällä. Beam-haku tuottaa yleensä sujuvampia tiivistelmiä.

Tietyn mallin valitseminen

Nimeä malli ohittaaksesi oletusmallin. Tiivistämiseen hienosäädetty tarkistuspiste, kuten distilbart, on pienempi ja nopeampi nopeita esittelyjä varten.

summarizer = pipeline("summarization",
  model="sshleifer/distilbart-cnn-12-6")

Tarkista tulos aina

Seq2seq-tulos tuotetaan, joten se voi poiketa lähteestä. Tarkista tärkeät faktat aina ennen kuin luotat abstraktiiviseen tiivistelmään. ✅

Pikatarkistus

Mikä seq2seq-mallin osa kirjoittaa tiivistelmän tokenit?

Kertaus

Ajoitte seq2seq-yhteenvedon Hugging Facen pipeline-putkella, säädit sen pituutta ja opitte huomioimaan syötteen rajoitukset sekä tarkistamaan tulosteen. 🎯

Aloita maksutta

Opi Python tekoälytuutorin avulla — ilmaiseksi

Kirjoita ja suorita oikeaa koodia selaimessa, saa välitöntä apua tekoälytuutorilta ympäri vuorokauden ja jatka siitä, mihin jäit, verkossa tai sovelluksessa.

Kurssit
30
Oppitunnit
120

Usein kysytyt kysymykset

Onko oppitunti ”Tiivistäminen Seq2Seq-mallilla” ilmainen?

Kyllä — voit lukea täällä verkossa kokonaan ilmaiseksi mitkä tahansa NLP Academy-oppimispolun 3 oppituntia, myös oppitunnin “Tiivistäminen Seq2Seq-mallilla”. Sen jälkeen CoddyKit PRO avaa kaikki oppitunnit sekä interaktiiviset harjoitukset sisäänrakennetulla koodieditorilla ja ympäri vuorokauden toimivalla tekoälytuutorilla. NLP Academy-kurssilla on yhteensä 4 oppituntia.

Mitä opin oppitunnilla ”Tiivistäminen Seq2Seq-mallilla”?

Suorita abstraktiivinen tiivistäjä Harjoittelet NLP Academy-aihetta koodilla, jonka suoritat suoraan selaimessa. Ympäri vuorokauden käytettävissä oleva tekoälytuutori vastaa kysymyksiisi oppitunnin aikana.

Tarvitsenko kokemusta aloittaakseni NLP Academy-opiskelun?

Aiempi kokemus ei ole tarpeen. CoddyKitin NLP Academy-oppimispolku sopii vasta-alkajista edistyneisiin, joten voit aloittaa tästä tai alusta ja edetä omaan tahtiisi. Tämä on oppitunti 2/4.

Kuinka kauan ”Tiivistäminen Seq2Seq-mallilla”-oppitunnin suorittaminen kestää?

Useimmat CoddyKitin oppitunnit kestävät noin 5–10 minuuttia. Jokainen oppitunti on lyhyt ja interaktiivinen, joten edistyt tasaisesti ja voit jatkaa siitä, mihin jäit – sekä verkossa että sovelluksessa.

Voinko kirjoittaa ja suorittaa koodia tällä NLP Academy-oppitunnilla?

Kyllä. Jokainen NLP Academy-oppitunti sisältää sisäänrakennetun koodieditorin, joten voit kirjoittaa ja suorittaa oikeaa koodia suoraan selaimessa ja saada välitöntä palautetta tekoälyltä – paikallista asennusta ei tarvita.

Kaikki tämän kurssin oppitunnit

  1. Ekstraktiiviset ja abstraktiiviset tiivistelmät
  2. Tiivistäminen Seq2Seq-mallilla
  3. Konekääntäminen käytännössä
  4. Generoinnin pisteytys ROUGElla ja BLEUlla
← Takaisin: NLP Academy