Glosar

Reordonarea documentelor (reranking)

Ce este Reordonarea documentelor (reranking)?

Reordonarea documentelor (document reranking) este o a doua etapă de sortare în sistemele de căutare și RAG: o căutare inițială rapidă returnează un set de rezultate candidate, pe care o metodă mai precisă, dar mai costisitoare, le reordonează apoi după relevanță. Aceasta se face adesea printr-un așa-numit cross-encoder, care evaluează împreună întrebarea și un pasaj. Astfel, cele mai relevante pasaje ajung în partea de sus înainte ca un model lingvistic să formuleze un răspuns pe baza lor.

Cum ajută KI.ordo

Căutarea în cunoștințe din KI.ordo ordonează pasajele după relevanță cu ajutorul metodei de căutare după cuvinte-cheie BM25, direct pe server.

Aflați mai multe : Reordonarea documentelor (reranking)

Subiecte

  • căutare
  • RAG
  • relevanță

Încercați KI.ordo

Agenți, fluxuri și șabloane într-un singur spațiu de lucru – demo gratuit de 24 de ore.

Porniți demo-ul
← Toți termenii

Termeni înrudiți

Generare augmentată prin regăsire (RAG)

Generarea augmentată prin regăsire combină căutarea cu generarea de text: înainte de a răspunde, sistemul caută într-o colecție de cunoștințe – de exemplu manuale, regulamente sau FAQ-uri – pasajele relevante și le transmite modelului lingvistic drept context. Răspunsul se bazează astfel pe conținut actual, specific companiei, și nu doar pe cunoștințele de antrenare ale modelului. Aceasta reduce afirmațiile inventate, face sursele verificabile și permite actualizări fără reantrenare.

  • RAG
  • căutare în cunoștințe
  • +1

Regăsirea informațiilor

Regăsirea informațiilor (information retrieval) cuprinde metodele care găsesc, într-un volum mare de text, documentele sau pasajele ce corespund unei interogări și le ordonează după relevanță. Abordările clasice, precum BM25, ponderează termenii de căutare după cât de des și cât de rar apar; cele mai noi adaugă similitudinea semantică. Stă la baza motoarelor de căutare, a căutării în întreprindere și a retrieval-augmented generation, în care un model lingvistic folosește pasajele regăsite ca bază pentru răspunsul său.

  • Căutare
  • BM25
  • +1

Pipeline de regăsire

Un pipeline de regăsire este succesiunea de pași de prelucrare prin care un sistem găsește informațiile potrivite pentru o întrebare. Pașii tipici sunt: preluarea și curățarea documentelor, împărțirea lor în fragmente (chunk-uri), crearea unui index de căutare, eventual reformularea interogării, regăsirea potrivirilor, ordonarea lor (reranking) și transmiterea celor mai bune către modelul lingvistic. Este fundamentul oricărei aplicații RAG, iar calitatea sa determină în mare măsură cât de bune sunt răspunsurile obținute.

  • RAG
  • căutare
  • +1

Evaluarea documentelor (RAG)

În retrieval-augmented generation (RAG), evaluarea documentelor înseamnă verificarea pasajelor regăsite pentru a stabili dacă se potrivesc întrebării și pot susține un răspuns. Doar pasajele apreciate ca relevante sunt transmise modelului lingvistic; rezultatele nepotrivite sunt eliminate sau declanșează o nouă căutare. Aceasta reduce riscul de răspunsuri inventate sau cu surse greșite, de exemplu atunci când apare un document depășit pentru o întrebare despre prețurile actuale.

  • RAG
  • relevanță
  • +1