Terminų žodynas

Natūralios kalbos apdorojimas (NLP)

Kas yra Natūralios kalbos apdorojimas (NLP)?

Natūralios kalbos apdorojimas – DI šaka, leidžianti kompiuteriams analizuoti, suprasti ir generuoti žmonių kalbą tekstu ar žodžiu. Jis apima tokias užduotis kaip vertimas, klasifikavimas, apibendrinimas, nuotaikų analizė ir atsakymai į klausimus. Kadaise dominavo taisyklės ir statistiniai metodai; šiandien sritį formuoja dideli kalbos modeliai.

Kaip padeda KI.ordo

KI.ordo agentai naudoja Claude modelius, kad suprastų užklausas natūralia kalba ir atsakytų į jas remdamiesi saugomomis žiniomis.

Sužinoti daugiau : Natūralios kalbos apdorojimas (NLP)

Temos

  • NLP
  • Kalba
  • Pagrindai

Išbandykite KI.ordo

Agentai, srautai ir šablonai vienoje darbo srityje – nemokama 24 valandų demonstracinė versija.

Pradėti demonstraciją
← Visi terminai

Susiję terminai

Natūralios kalbos supratimas (NLU)

Natūralios kalbos supratimas – kalbos apdorojimo dalis, fiksuojanti pasakymo prasmę: koks kėslas už jo slypi, kokie asmenys, vietos ar datos minimi ir koks yra tonas? Kartu su natūralios kalbos generavimu (NLG) NLU sudaro vieną iš dviejų NLP pusių. Vienas pavyzdys – klientų aptarnavimo sistema, atpažįstanti „Mano siuntinys vis dar neatkeliavo“ kaip užklausą dėl pristatymo.

  • NLP
  • Kėslo atpažinimas
  • +1

Natūralios kalbos generavimas (NLG)

Natūralios kalbos generavimas (NLG) – kalbos apdorojimo sritis, kurioje iš duomenų, trumpų punktų ar kitos įvesties sukuriamas suprantamas tekstas. Ankstesnės NLG sistemos rėmėsi šablonais ir taisyklėmis; šiandien dauguma naudoja didelius kalbos modelius. Tipiniai taikymai: orų ir biržos ataskaitos, produktų aprašymai, rodiklių santraukos ir pokalbių roboto atsakymai. Svarbu, kad skaičiai ir faktai iš įvesties būtų perimti teisingai ir nepakeisti.

  • kalbos apdorojimas
  • tekstų generavimas
  • +1
Šablonas

Didysis kalbos modelis (LLM)

Didysis kalbos modelis (angl. large language model, LLM) – tai neuroninis tinklas, apmokytas su labai dideliais teksto kiekiais, todėl gebantis suprasti ir generuoti kalbą. Jis veikia žingsnis po žingsnio skaičiuodamas labiausiai tikėtiną kitą tokeną. LLM rašo, apibendrina, verčia, atsako į klausimus ir generuoja kodą; gerai žinomi pavyzdžiai – „Claude“, GPT, „Gemini“ ir „Llama“. Neturėdami prieigos prie aktualių šaltinių, jie žino tik tai, kas buvo jų mokymo duomenyse.

  • kalbos modeliai
  • generatyvinis DI
  • +1

NLTK

NLTK (Natural Language Toolkit) – atvirojo kodo Python biblioteka natūralios kalbos apdorojimui, sukurta Pensilvanijos universitete 2000-ųjų pradžioje. Ji teikia įrankius tokenizavimui, kamienų išskyrimui, kalbos dalių žymėjimui ir paprastam klasifikavimui bei prieigą prie daugybės tekstų korpusų. NLTK daugiausia naudojama mokyme ir moksliniuose tyrimuose; gamybinėms programoms dažnai pasirenkamos tokios bibliotekos kaip spaCy arba transformerių modeliai.

  • Python
  • kalbos apdorojimas
  • +1