Sanasto

Luonnollisen kielen käsittely (NLP)

Mikä on Luonnollisen kielen käsittely (NLP)?

Luonnollisen kielen käsittely on tekoälyn osa-alue, joka mahdollistaa tietokoneiden analysoida, ymmärtää ja tuottaa ihmiskieltä tekstinä tai puheena. Se kattaa tehtäviä, kuten kääntäminen, luokittelu, tiivistäminen, sentimenttianalyysi ja kysymyksiin vastaaminen. Aiemmin vallitsivat sääntö- ja tilastomenetelmät; nykyään alaa muovaavat suuret kielimallit.

Miten KI.ordo auttaa

KI.ordon agentit käyttävät Claude-malleja ymmärtääkseen pyyntöjä luonnollisella kielellä ja vastatakseen niihin tallennetun tietämyksen pohjalta.

Lue lisää

Aiheet

NLP
Kieli
Perusominaisuudet

Kokeile KI.ordoa

Agentit, työnkulut ja mallit yhdessä työtilassa – maksuton 24 tunnin demo.

Aloita demo

← Kaikki termit

Liittyvät termit

Luonnollisen kielen ymmärtäminen (NLU)

Luonnollisen kielen ymmärtäminen on kielenkäsittelyn osa, joka tavoittaa lausuman merkityksen: mikä aikomus sen takana on, mitä henkilöitä, paikkoja tai päivämääriä mainitaan ja mikä on sävy? Yhdessä luonnollisen kielen tuottamisen (NLG) kanssa NLU muodostaa toisen NLP:n kahdesta puolesta. Esimerkki on asiakaspalvelujärjestelmä, joka tunnistaa viestin ”Pakettini ei ole vieläkään tullut” toimitustiedusteluksi.

NLP
Aikomuksen tunnistus
+1

Luonnollisen kielen tuottaminen (NLG)

Luonnollisen kielen tuottaminen (NLG, natural language generation) on kielenkäsittelyn osa-alue, joka tuottaa ymmärrettävää tekstiä datasta, luettelokohdista tai muista syötteistä. Aiemmat NLG-järjestelmät perustuivat malleihin ja sääntöihin; nykyään useimmat käyttävät suuria kielimalleja. Tyypillisiä käyttökohteita ovat sää- ja pörssiraportit, tuotekuvaukset, tunnuslukujen tiivistelmät ja chatbottien vastaukset. On tärkeää, että syötteiden luvut ja tosiasiat siirtyvät oikein ja muuttumattomina.

kielenkäsittely
tekstin tuottaminen
+1

Malli

Suuri kielimalli (LLM)

Suuri kielimalli (LLM) on neuroverkko, joka on koulutettu hyvin suurilla tekstimäärillä, jotta se ymmärtää ja tuottaa kieltä. Se toimii laskemalla askel askeleelta todennäköisimmän seuraavan tokenin. LLM:t kirjoittavat, tiivistävät, kääntävät, vastaavat kysymyksiin ja tuottavat koodia; tunnettuja esimerkkejä ovat Claude, GPT, Gemini ja Llama. Ilman pääsyä ajankohtaisiin lähteisiin ne tietävät vain sen, mitä niiden koulutusdatassa oli.

kielimallit
generatiivinen tekoäly
+1

NLTK

NLTK (Natural Language Toolkit) on avoimen lähdekoodin Python-kirjasto luonnollisen kielen käsittelyyn, ja se luotiin Pennsylvanian yliopistossa 2000-luvun alussa. Se tarjoaa työkaluja tokenisointiin, perusmuotojen tunnistukseen (stemming), sanaluokkien merkintään ja yksinkertaiseen luokitteluun sekä pääsyn lukuisiin tekstikorpuksiin. NLTK:ta käytetään pääasiassa opetuksessa ja tutkimuksessa; tuotantosovellukset nojaavat usein kirjastoihin, kuten spaCy, tai transformer-malleihin.

Python
kielenkäsittely
+1