Slovar pojmov

Obdelava naravnega jezika (NLP)

Kaj je Obdelava naravnega jezika (NLP)?

Obdelava naravnega jezika je veja UI, ki računalnikom omogoča analizo, razumevanje in generiranje človeškega jezika v besedilu ali govoru. Zajema naloge, kot so prevajanje, razvrščanje, povzemanje, analiza sentimenta in odgovarjanje na vprašanja. Nekoč so prevladovala pravila in statistične metode; danes področje oblikujejo veliki jezikovni modeli.

Kako pomaga KI.ordo

Agenti KI.ordo z modeli Claude razumejo zahteve v naravnem jeziku in nanje odgovarjajo na podlagi shranjenega znanja.

Več o tem

Teme

NLP
Jezik
Osnove

Preizkusite KI.ordo

Agenti, poteki dela in predloge v enem delovnem prostoru – brezplačna 24-urna predstavitev.

Začni predstavitev

← Vsi pojmi

Sorodni pojmi

Razumevanje naravnega jezika (NLU)

Razumevanje naravnega jezika je del obdelave jezika, ki zajame pomen izjave: kakšen namen stoji za njo, katere osebe, kraji ali datumi so omenjeni in kakšen je ton. Skupaj z generiranjem naravnega jezika (NLG) NLU tvori eno od dveh strani NLP. Primer je sistem za podporo strankam, ki „Moj paket še vedno ni prispel“ prepozna kot povpraševanje o dostavi.

NLP
Zaznavanje namena
+1

Generiranje naravnega jezika (NLG)

Generiranje naravnega jezika (NLG) je področje obdelave jezika, ki iz podatkov, alinej ali drugih vhodov ustvari razumljivo besedilo. Starejši sistemi NLG so temeljili na predlogah in pravilih; danes večina uporablja velike jezikovne modele. Tipične uporabe so vremenska in borzna poročila, opisi izdelkov, povzetki ključnih številk in odgovori klepetalnih robotov. Pomembno je, da se številke in dejstva iz vhodov prenesejo pravilno in nespremenjeno.

obdelava jezika
generiranje besedil
+1

Predloga

Veliki jezikovni model (LLM)

Veliki jezikovni model (large language model, LLM) je nevronska mreža, naučena na zelo velikih količinah besedil, kar ji omogoča razumevanje in ustvarjanje jezika. Deluje tako, da korak za korakom izračunava najverjetnejši naslednji token. LLM-ji pišejo, povzemajo, prevajajo, odgovarjajo na vprašanja in ustvarjajo kodo; znani primeri so Claude, GPT, Gemini in Llama. Brez dostopa do aktualnih virov poznajo le tisto, kar je bilo v njihovih učnih podatkih.

Jezikovni modeli
Generativna UI
+1

NLTK

NLTK (Natural Language Toolkit) je odprtokodna knjižnica za Python za obdelavo naravnega jezika, nastala na Univerzi v Pensilvaniji v zgodnjih letih 2000. Nudi orodja za tokenizacijo, korenjenje, oblikoslovno označevanje in preprosto razvrščanje ter dostop do številnih besedilnih korpusov. NLTK se uporablja predvsem v izobraževanju in raziskavah; produkcijske aplikacije pogosto temeljijo na knjižnicah, kot je spaCy, ali na modelih transformer.

Python
obdelava jezika
+1