Slovník pojmov

Prehodnotenie poradia dokumentov (reranking)

Čo je Prehodnotenie poradia dokumentov (reranking)?

Prehodnotenie poradia dokumentov (reranking) je druhý krok triedenia vo vyhľadávacích systémoch a systémoch RAG: rýchle úvodné vyhľadávanie vráti množinu kandidátskych výsledkov, ktoré potom presnejšia, ale nákladnejšia metóda zoradí podľa relevantnosti. Často to robí takzvaný cross-encoder, ktorý posudzuje otázku a úryvok spoločne. Vďaka tomu sú najrelevantnejšie úryvky navrchu skôr, než z nich jazykový model sformuluje odpoveď.

Ako pomáha KI.ordo

Vyhľadávanie znalostí v KI.ordo zoraďuje úryvky podľa relevantnosti pomocou kľúčovej metódy BM25 priamo na serveri.

Zistiť viac : Prehodnotenie poradia dokumentov (reranking)

Témy

  • vyhľadávanie
  • RAG
  • relevantnosť

Vyskúšajte KI.ordo

Agenti, postupy a šablóny v jednom pracovnom priestore – bezplatné 24-hodinové demo.

Spustiť demo
← Všetky pojmy

Súvisiace pojmy

Retrieval-augmented generation (RAG)

Retrieval-augmented generation spája vyhľadávanie s generovaním textu: pred odpoveďou systém vyhľadá relevantné pasáže v zbierke znalostí – napríklad v príručkách, smerniciach alebo FAQ – a odovzdá ich jazykovému modelu ako kontext. Odpoveď tak vychádza z aktuálneho obsahu špecifického pre firmu, a nielen z trénovacích znalostí modelu. Znižuje to vymyslené tvrdenia, zviditeľňuje zdroje a umožňuje aktualizácie bez pretrénovania.

  • RAG
  • vyhľadávanie v znalostiach
  • +1

Vyhľadávanie informácií (information retrieval)

Vyhľadávanie informácií (information retrieval) zahŕňa metódy, ktoré vo veľkom súbore textov nájdu dokumenty alebo úryvky zodpovedajúce dopytu a zoradia ich podľa relevantnosti. Klasické prístupy, ako je BM25, váhujú hľadané výrazy podľa toho, ako často a ako zriedka sa vyskytujú; novšie pridávajú sémantickú podobnosť. Tvorí základ vyhľadávačov, podnikového vyhľadávania a generovania rozšíreného o vyhľadávanie (RAG), pri ktorom jazykový model používa nájdené úryvky ako základ svojej odpovede.

  • Vyhľadávanie
  • BM25
  • +1

Retrieval pipeline

Retrieval pipeline je postupnosť spracovateľských krokov, ktorými systém nájde správne informácie na zodpovedanie otázky. Typické kroky sú: načítanie a vyčistenie dokumentov, ich rozdelenie na úseky (chunky), vytvorenie vyhľadávacieho indexu, prípadne preformulovanie dopytu, vyhľadanie zhôd, ich zoradenie (reranking) a odovzdanie tých najlepších jazykovému modelu. Je základom každej aplikácie RAG a jej kvalita vo veľkej miere určuje, aké dobré budú výsledné odpovede.

  • RAG
  • vyhľadávanie
  • +1

Hodnotenie dokumentov (RAG)

Pri generovaní rozšírenom o vyhľadávanie (RAG) znamená hodnotenie dokumentov kontrolu nájdených úryvkov, či zodpovedajú otázke a môžu podporiť odpoveď. Jazykovému modelu sa odovzdajú len úryvky hodnotené ako relevantné; nevhodné výsledky sa zahodia alebo spustia nové vyhľadávanie. To znižuje riziko vymyslených alebo nesprávne podložených odpovedí, napríklad keď sa na otázku o aktuálnych cenách objaví zastaraný dokument.

  • RAG
  • relevantnosť
  • +1