Terminų žodynas

Korpusas

Kas yra Korpusas?

Korpusas – tai struktūrizuotas tekstų ar kalbos duomenų rinkinys, sudarytas analizei, tyrimams ar kalbos modeliams mokyti. Jis gali būti bendrinis, pavyzdžiui, daugelio metų naujienų tekstai, arba konkrečios srities, pavyzdžiui, visos įmonės sutartys ir vadovai. Dydis, subalansuotumas, aktualumas ir teisės į tekstus lemia, kiek naudingos yra gautos išvados.

Kaip padeda KI.ordo

KI.ordo išsaugotos žinios (tekstai, PDF su teksto sluoksniu, „Word“ failai ir tinklalapiai) sudaro rinkinį, kuriame agentai ieško atsakydami į klausimus.

Sužinoti daugiau

Temos

Duomenys
tekstai
NLP

Išbandykite KI.ordo

Agentai, srautai ir šablonai vienoje darbo srityje – nemokama 24 valandų demonstracinė versija.

Pradėti demonstraciją

← Visi terminai

Susiję terminai

Mokymo duomenys

Mokymo duomenys – pavyzdžiai, iš kurių DI modelis mokosi dėsningumų: dideli tekstų rinkiniai kalbos modeliams, pažymėti vaizdai vaizdų modeliams. Jų kokybė, įvairovė ir naujumas daugiausia lemia, kaip patikimas ir teisingas bus modelis ir kokios šviežios bus jo žinios. Organizacijoms taip pat svarbu, ar tiekėjas jų įvestus klientų duomenis naudoja tolesniam mokymui.

Duomenys
Training
+1

Natūralios kalbos apdorojimas (NLP)

Natūralios kalbos apdorojimas – DI šaka, leidžianti kompiuteriams analizuoti, suprasti ir generuoti žmonių kalbą tekstu ar žodžiu. Jis apima tokias užduotis kaip vertimas, klasifikavimas, apibendrinimas, nuotaikų analizė ir atsakymai į klausimus. Kadaise dominavo taisyklės ir statistiniai metodai; šiandien sritį formuoja dideli kalbos modeliai.

NLP
Kalba
+1

Nestruktūruoti duomenys

Nestruktūruoti duomenys nesilaiko fiksuotos lentelės schemos: el. laiškai, sutartys, instrukcijos, interneto puslapiai, pristatymai, vaizdai ar garso įrašai. Jie sudaro didelę organizacijų žinių dalį, tačiau ilgai buvo sunkiai automatiškai analizuojami. Kalbos modeliai gali skaityti ir ieškoti tokiame turinyje ir paversti jį struktūruota informacija, pavyzdžiui, išgauti terminus ir sumas iš sutarties į lentelę.

Duomenys
Dokumentai
+1

Duomenų gavyba (data mining)

Duomenų gavyba – tai sistemingas didelių duomenų rinkinių tyrimas siekiant rasti dėsningumų, ryšių ir anomalijų. Ji remiasi statistiniais metodais ir mašininio mokymosi technikomis, pavyzdžiui, klasterizavimu, klasifikavimu ar asociacijų analize. Klasikinis pavyzdys – pirkinių krepšelio analizė mažmeninėje prekyboje, rodanti, kokios prekės dažnai perkamos kartu; tai asortimento, išdėstymo ir rekomendacijų pagrindas.

duomenų analizė
dėsningumų atpažinimas
+1