Glossarju

Word embeddings

X'inhu Word embeddings?

Il-word embeddings jirrappreżentaw kliem bħala vetturi numeriċi sabiex kliem b'tifsiriet simili jkunu qrib xulxin fl-ispazju vettorjali, bħal “karozza” u “vettura”. Metodi bħal Word2Vec jew GloVe jitgħallmu dawn il-vetturi minn ammonti kbar ta' test. Kienu pass importanti fl-ipproċessar tal-lingwa, per eżempju għat-tfittxija jew il-klassifikazzjoni; il-mudelli lingwistiċi tal-lum jużaw embeddings kuntestwali li fihom kelma tiġi rappreżentata differenti skont is-sentenza.

Kif jgħin KI.ordo

It-tfittxija tal-għarfien ta' KI.ordo ma tużax embeddings iżda tfittxija bil-kliem ewlieni BM25 direttament fuq is-server.

Suġġetti

NLP
Vetturi
Semantika

Ipprova KI.ordo

Aġenti, flussi tax-xogħol u mudelli fi spazju tax-xogħol wieħed – demo b'xejn għal 24 siegħa.

Ibda d-demo

← It-termini kollha

Termini relatati

Vettur tal-embedding

Vettur tal-embedding (embedding) huwa lista ta' numri li tirrappreżenta t-tifsira ta' kelma, sentenza jew dokument b'tali mod li testi b'kontenut simili jkunu qrib xulxin. Dan jagħmilha possibbli li, pereżempju, jingħaraf li “kanċellazzjoni” u “tmiem tal-kuntratt” huma relatati anki jekk ma jaqsmu l-ebda kelma. L-embeddings huma l-bażi ta' ħafna sistemi ta' tiftix semantiku, servizzi ta' rakkomandazzjoni u applikazzjonijiet tal-RAG; huma kkalkulati minn mudelli mħarrġa apposta.

vettur
tiftix semantiku
+1

Gensim

Gensim hija librerija Python open source għall-analiżi ta' ġbir kbir ta' testi. Hija magħrufa għal mudelli tas-suġġetti bħal LDA, għat-taħriġ ta' vetturi tal-kliem (pereżempju Word2Vec, FastText u Doc2Vec) u għat-tqabbil ta' dokumenti skont is-similarità. Peress li Gensim jipproċessa d-data f'porzjonijiet, jista' jittratta wkoll korpora li ma jdaħlux fil-memorja. Użu tipiku: jiġu miġbura awtomatikament eluf ta' kummenti tal-klijenti skont temi rikorrenti.

Librerija Python
Immudellar tas-suġġetti
+1

Ipproċessar tal-lingwa naturali (NLP)

L-ipproċessar tal-lingwa naturali huwa l-fergħa tal-IA li tippermetti lill-kompjuters janalizzaw, jifhmu u jiġġeneraw lingwa umana fit-test jew fid-diskors. Ikopri kompiti bħat-traduzzjoni, il-klassifikazzjoni, is-sommarju, l-analiżi tas-sentiment u t-tweġiba għal mistoqsijiet. Darba kienu jiddominaw ir-regoli u l-metodi statistiċi; illum il-qasam huwa ffurmat mill-mudelli lingwistiċi kbar.

NLP
Lingwa
+1

Analiżi semantika

L-analiżi semantika teżamina t-tifsira tal-lingwa – mhux biss liema kliem jidher, iżda x'inhu maħsub. Dan jinkludi li tinterpreta b'mod korrett kliem ambigwu fil-kuntest (bħal “bank” bħala istituzzjoni finanzjarja jew xatt ta' xmara), li tagħraf relazzjonijiet bejn kunċetti u li tikklassifika dikjarazzjonijiet skont il-kontenut. Tsostni applikazzjonijiet bħall-analiżi tal-feedback tal-klijenti, it-tweġiba għal mistoqsijiet jew sistemi tat-tfittxija li għandhom jifhmu wkoll mistoqsijiet formulati differenti bl-istess tifsira.

NLP
tifsira
+1