Gluais

BERT

Cad is BERT ann?

Is samhail teanga é BERT (Bidirectional Encoder Representations from Transformers) a thug Google isteach in 2018. Murab ionann agus samhlacha níos luaithe, breithníonn sé an comhthéacs ar chlé agus ar dheis focail ag an am céanna, rud a chabhraíonn leis débhríocht a réiteach. Tá BERT deartha chun téacs a thuiscint seachas sleachta níos faide a scríobh. Úsáidtear é le haghaidh cuardaigh, rangú téacs, aithint aonán ainmnithe agus freagairt ceisteanna agus bhí tionchar aige ar go leor samhlacha a tháinig ina dhiaidh.

Topaicí

Samhail teanga
NLP
Transformer

Bain triail as KI.ordo

Gníomhairí, sreafaí oibre agus teimpléid in aon spás oibre amháin – taispeántas 24 uair an chloig saor in aisce.

Tosaigh an taispeántas

← Gach téarma

Téarmaí gaolmhara

Transformer

Ailtireacht líonra néarach is ea an trasfhoirmeoir a tugadh isteach in 2017 sa pháipéar taighde “Attention Is All You Need”. Ag a croílár tá an mheicníocht aird: tugtar meáchan do gach focal i gcoibhneas leis na focail eile go léir i dtéacs, agus is féidir an ríomh a dhéanamh go comhthreomhar go héifeachtúil. Tá trasfhoirmeoirí mar bhunús le múnlaí teanga an lae inniu ar nós GPT, Claude agus BERT agus úsáidtear freisin iad d’íomhánna agus d’fhuaim.

Ailtireacht
Domhainfhoghlaim
+1

Tuiscint teanga nádúrtha (NLU)

Is éard is tuiscint teanga nádúrtha ann ná an chuid de phróiseáil teanga a ghabhann brí ráitis: cén aidhm atá taobh thiar de, cé na daoine, na háiteanna nó na dátaí a luaitear, agus cad é a ton? I dteannta giniúint teanga nádúrtha (NLG), is ceann den dá thaobh de NLP é NLU. Sampla amháin is ea córas seirbhíse do chustaiméirí a aithníonn “Níl mo phacáiste tagtha fós” mar fhiosrúchán seachadta.

NLP
Brath aidhme
+1

Leabuithe focal

Léiríonn leabuithe focal focail mar veicteoirí uimhriúla ionas go luíonn focail a bhfuil brí chosúil acu gar dá chéile sa spás veicteoirí, ar nós “carr” agus “feithicil”. Foghlaimíonn modhanna ar nós Word2Vec nó GloVe na veicteoirí seo ó mhéideanna móra téacs. Bhí siad ina gcéim thábhachtach i bpróiseáil teanga, mar shampla le haghaidh cuardaigh nó aicmithe; úsáideann múnlaí teanga an lae inniu leabuithe comhthéacsúla ina léirítear focal ar bhealach difriúil ag brath ar an abairt.

NLP
Veicteoirí
+1

Claochladán réamhoilte giniúnach (GPT)

Tagraíonn GPT (generative pre-trained transformer) do shraith mórshamhlacha teanga a d'fhorbair OpenAI agus atá bunaithe ar ailtireacht an chlaochladáin. Déantar na samhlacha a réamhoiliúint ar dtús ar thoirt ollmhóra téacs chun an chéad token eile a thuar agus ansin oiliúnaítear tuilleadh iad le haghaidh idirphlé agus treoracha a leanúint. Tháinig an chéad samhail GPT amach in 2018; tá glúnta níos déanaí mar bhunús le ChatGPT. I ngnáthchaint úsáidtear ‘GPT’ go minic do shamhlacha teanga i gcoitinne.

Samhail teanga
Transformer
+1