Речник

Пренареждане на документи (document reranking)

Какво е Пренареждане на документи (document reranking)?

Пренареждането на документи (document reranking) е втора стъпка на сортиране в системите за търсене и RAG: бързо първоначално търсене връща набор от кандидат-резултати, които по-прецизен, но по-скъп метод след това подрежда по релевантност. Това често се прави от т.нар. cross-encoder, който оценява въпроса и откъса заедно. Така най-релевантните откъси се озовават най-отгоре, преди езиков модел да формулира отговор въз основа на тях.

Как помага KI.ordo

Търсенето в знанията на KI.ordo подрежда откъсите по релевантност чрез метода с ключови думи BM25 директно на сървъра.

Научете повече

Теми

търсене
RAG
релевантност

Изпробвайте KI.ordo

Агенти, потоци и шаблони в едно работно пространство – безплатна 24-часова демонстрация.

Стартирайте демото

← Всички термини

Свързани термини

Генериране, допълнено с извличане (RAG)

Генерирането, допълнено с извличане (Retrieval-augmented generation), съчетава търсене с генериране на текст: преди да отговори, системата търси в колекция от знания – например ръководства, правилници или често задавани въпроси – подходящи пасажи и ги подава на езиковия модел като контекст. Така отговорът се основава на актуално съдържание, специфично за компанията, а не само на знанията от обучението на модела. Това намалява измислените твърдения, прави източниците проследими и позволява актуализации без повторно обучение.

RAG
търсене в знанията
+1

Извличане на информация (information retrieval)

Извличането на информация (information retrieval) обхваща методи за намиране на документите или откъсите в голям обем текст, които съответстват на дадена заявка, и за подреждането им по релевантност. Класически подходи като BM25 претеглят термините за търсене според това колко често и колко рядко се срещат; по-новите добавят семантично сходство. То е в основата на търсачките, корпоративното търсене и retrieval-augmented generation, при което езиков модел използва извлечените откъси като основа за отговора си.

Търсене
BM25
+1

Конвейер за извличане

Конвейерът за извличане (retrieval pipeline) е последователността от стъпки на обработка, с която една система намира правилната информация за даден въпрос. Типични стъпки са: приемане и почистване на документите, разделянето им на части (chunks), изграждане на индекс за търсене, при желание преформулиране на заявката, извличане на съвпаденията, подреждането им (reranking) и подаване на най-добрите към езиковия модел. Той е основата на всяко RAG приложение и качеството му до голяма степен определя колко добри ще бъдат получените отговори.

RAG
търсене
+1

Оценяване на документи (RAG)

При retrieval-augmented generation (RAG) оценяването на документи означава проверка на извлечените откъси дали отговарят на въпроса и могат да подкрепят отговор. Само откъсите, оценени като релевантни, се предават на езиковия модел; неподходящите резултати се отхвърлят или задействат ново търсене. Така намалява рискът от измислени или неправилно обосновани отговори, например когато за въпрос за актуални цени се появи остарял документ.

RAG
релевантност
+1