Glossário

Pipeline de recuperação

O que é Pipeline de recuperação?

Um pipeline de recuperação é a sequência de passos de processamento que um sistema utiliza para encontrar a informação certa para uma pergunta. Os passos típicos são: importar e limpar documentos, dividi-los em blocos (chunks), criar um índice de pesquisa, reformular opcionalmente a consulta, obter as correspondências, ordená-las (reranking) e transmitir as melhores ao modelo de linguagem. É a base de qualquer aplicação RAG, e a sua qualidade determina em grande medida a qualidade das respostas obtidas.

Como o KI.ordo ajuda

No KI.ordo, o conhecimento guardado é dividido em blocos sobrepostos e pesquisado com a pesquisa por palavras-chave BM25 diretamente no servidor – sem base de dados vetorial.

Saber mais

Temas

RAG
pesquisa
processamento de dados

Experimentar o KI.ordo

Agentes, fluxos e modelos num só espaço de trabalho – demonstração gratuita de 24 horas.

Iniciar demonstração

← Todos os termos

Termos relacionados

Geração aumentada por recuperação (RAG)

A geração aumentada por recuperação combina pesquisa com geração de texto: antes de responder, o sistema pesquisa numa coleção de conhecimento – como manuais, diretrizes ou FAQ – as passagens relevantes e transmite-as ao modelo de linguagem como contexto. A resposta baseia-se assim em conteúdos atuais e específicos da empresa, e não apenas no conhecimento de treino do modelo. Isto reduz as afirmações inventadas, torna as fontes rastreáveis e permite atualizações sem retreino.

RAG
pesquisa de conhecimento
+1

Reclassificação de documentos

A reclassificação de documentos (reranking) é um segundo passo de ordenação em sistemas de pesquisa e RAG: uma pesquisa inicial rápida devolve um conjunto de resultados candidatos, que um método mais preciso, mas mais dispendioso, volta depois a ordenar por relevância. Isto é frequentemente feito por um chamado cross-encoder, que avalia em conjunto a pergunta e uma passagem. Assim, as passagens mais relevantes ficam no topo antes de um modelo de linguagem formular uma resposta a partir delas.

pesquisa
RAG
+1

Expansão de consulta

A expansão de consulta acrescenta automaticamente termos relacionados a uma consulta de pesquisa, para que sejam também encontrados documentos relevantes que usem outra formulação. Os acrescentos típicos são sinónimos, abreviaturas, formas de palavras ou traduções: uma pesquisa por «cancelamento» pode então encontrar também textos sobre «rescisão de contrato». É particularmente útil na pesquisa por palavras-chave, mas pode reduzir a precisão se forem acrescentados termos em excesso ou inadequados. Hoje, utilizam-se muitas vezes modelos de linguagem para gerar as consultas expandidas.

pesquisa
sinónimos
+1

Recuperação de informação

A recuperação de informação abrange métodos que encontram, num grande corpo de texto, os documentos ou passagens que correspondem a uma consulta e os ordenam por relevância. As abordagens clássicas, como o BM25, ponderam os termos de pesquisa consoante a frequência e a raridade com que ocorrem; as mais recentes acrescentam a semelhança semântica. Está na base dos motores de pesquisa, da pesquisa empresarial e da geração aumentada por recuperação, em que um modelo de linguagem usa as passagens recuperadas como base da sua resposta.

Pesquisa
BM25
+1