Gluais

Líonra néarach athfhillteach (RNN)

Cad is Líonra néarach athfhillteach (RNN) ann?

Próiseálann líonra néarach athfhillteach sonraí in ord agus cuireann sé staid inmheánach ar aghaidh ó gach céim go dtí an chéad cheann eile – cineál cuimhne gearrthéarmaí. Fágann sé seo go bhfuil sé oiriúnach do sheichimh ar nós téacs, cainte nó sraitheanna ama, mar shampla chun an chéad fhocal eile nó an chéad léamh braiteora eile a thuar. Déanann RNNanna simplí dearmad go héasca ar fhaisnéis ó i bhfad siar; laghdaíonn leaganacha ar nós LSTM agus GRU é seo. I gcás múnlaí teanga, tá trasfhoirmeoirí tagtha in ionad RNNanna den chuid is mó.

Topaicí

líonraí néaracha
seichimh
domhainfhoghlaim

Bain triail as KI.ordo

Gníomhairí, sreafaí oibre agus teimpléid in aon spás oibre amháin – taispeántas 24 uair an chloig saor in aisce.

Tosaigh an taispeántas

← Gach téarma

Téarmaí gaolmhara

Long Short-Term Memory (LSTM)

Cineál líonra néarach athfhillteach is ea Long Short-Term Memory (LSTM) a fhéadann faisnéis a choinneáil thar seichimh fhada. Socraíonn geataí mar a thugtar orthu ag gach céim cad atá le stóráil, le dearmad nó le haschur, rud a mhaolaíonn fadhb an ghrádáin atá ag imeacht. Ar feadh na mblianta fada mhúnlaigh LSTManna aitheantas cainte, aistriúchán agus réamhaisnéisiú sraithe ama. I bpróiseáil teanga tá claochladáin tar éis iad a ionadú den chuid is mó, ach tá siad coitianta fós do shonraí braiteora.

líonraí néaracha
seichimh
+1

LSTM déthreoch

Is líonra néarach athfhillteach é LSTM déthreoch (BiLSTM) a léann seicheamh ar aghaidh agus siar araon agus a chomhcheanglaíonn an dá radharc. Ciallaíonn sé seo go gcuirtear san áireamh freisin an comhthéacs a thagann i ndiaidh gach focail. Sular ghlac trasfhoirmeoirí an lámh in uachtar, ba rogha chaighdeánach é do thascanna ar nós clibeáil páirteanna cainte, aithint aonán ainmnithe agus aithint cainte. I gcás téacsanna an-fhada agus tacair mhóra sonraí, is gnách go n-éiríonn níos fearr le trasfhoirmeoirí anois.

Líonraí néaracha
Samhlacha seichimh
+1

Samhaltú seicheamh

Clúdaíonn samhaltú seicheamh modhanna a phróiseálann agus a thuarann sonraí in ord seasta, ina bhfuil tábhacht le suíomh gach eilimint. Is seicheamh tipiciúil iad téacs, caint, sraitheanna ama ar nós díolacháin nó léamha braiteora agus teascáin DNA. Tá feidhmchláir ann ó aistriúchán agus giniúint téacs go haitheantas cainte agus réamhaisnéisiú díolacháin. Úsáideadh múnlaí folaithe Markov agus líonraí athfhillteacha chuige seo; inniu tá múnlaí trasfhoirmeora i réim don teanga.

seichimh
domhainfhoghlaim
+1

Transformer

Ailtireacht líonra néarach is ea an trasfhoirmeoir a tugadh isteach in 2017 sa pháipéar taighde “Attention Is All You Need”. Ag a croílár tá an mheicníocht aird: tugtar meáchan do gach focal i gcoibhneas leis na focail eile go léir i dtéacs, agus is féidir an ríomh a dhéanamh go comhthreomhar go héifeachtúil. Tá trasfhoirmeoirí mar bhunús le múnlaí teanga an lae inniu ar nós GPT, Claude agus BERT agus úsáidtear freisin iad d’íomhánna agus d’fhuaim.

Ailtireacht
Domhainfhoghlaim
+1