Slovar pojmov

Ponovno razvrščanje dokumentov

Kaj je Ponovno razvrščanje dokumentov?

Ponovno razvrščanje dokumentov (document reranking) je drugi korak razvrščanja pri iskanju in sistemih RAG: hitro začetno iskanje vrne nabor kandidatov, ki jih natančnejša, a dražja metoda nato znova razvrsti po ustreznosti. To pogosto naredi t. i. cross-encoder, ki vprašanje in odlomek oceni skupaj. Tako so najustreznejši odlomki na vrhu, preden jezikovni model iz njih oblikuje odgovor.

Kako pomaga KI.ordo

Iskanje po znanju v KI.ordo razvršča odlomke po ustreznosti z iskalno metodo ključnih besed BM25 neposredno na strežniku.

Več o tem

Teme

iskanje
RAG
ustreznost

Preizkusite KI.ordo

Agenti, poteki dela in predloge v enem delovnem prostoru – brezplačna 24-urna predstavitev.

Začni predstavitev

← Vsi pojmi

Sorodni pojmi

Generiranje z obogatenim priklicem (RAG)

Generiranje z obogatenim priklicem združuje iskanje z generiranjem besedil: preden sistem odgovori, v zbirki znanja – na primer priročnikih, pravilnikih ali pogostih vprašanjih – poišče ustrezne odlomke in jih kot kontekst poda jezikovnemu modelu. Odgovor tako temelji na aktualnih vsebinah podjetja in ne le na znanju modela iz učenja. To zmanjša izmišljene trditve, omogoči sledljivost virov in posodobitve brez ponovnega učenja.

RAG
iskanje po znanju
+1

Iskanje informacij

Iskanje informacij zajema metode, ki v veliki zbirki besedil najdejo dokumente ali odlomke, ki ustrezajo poizvedbi, in jih razvrstijo po ustreznosti. Klasični pristopi, kot je BM25, iskalne izraze uteže glede na to, kako pogosto in kako redko se pojavljajo; novejši dodajajo pomensko podobnost. Podlaga so iskalnikom, podjetniškemu iskanju in generiranju z dopolnjevanjem iz virov, pri katerem jezikovni model najdene odlomke uporabi kot osnovo za odgovor.

Iskanje
BM25
+1

Cevovod priklica

Cevovod priklica je zaporedje korakov obdelave, s katerimi sistem najde prave informacije za vprašanje. Tipični koraki so: zajem in čiščenje dokumentov, razdelitev na odseke, izgradnja iskalnega indeksa, po potrebi preoblikovanje poizvedbe, priklic zadetkov, njihovo razvrščanje (reranking) in posredovanje najboljših jezikovnemu modelu. Je temelj vsake aplikacije RAG, njegova kakovost pa v veliki meri določa, kako dobri so končni odgovori.

RAG
iskanje
+1

Ocenjevanje dokumentov (RAG)

Pri generiranju z dopolnjevanjem iz virov (RAG) ocenjevanje dokumentov pomeni preverjanje najdenih odlomkov, ali ustrezajo vprašanju in lahko podprejo odgovor. Jezikovnemu modelu se posredujejo samo odlomki, ocenjeni kot ustrezni; neprimerni rezultati se zavržejo ali sprožijo novo iskanje. To zmanjša tveganje izmišljenih ali napačno navedenih odgovorov, na primer kadar se pri vprašanju o aktualnih cenah pojavi zastarel dokument.

RAG
ustreznost
+1