O que é Geração aumentada por cache (CAG)?
A geração aumentada por cache (CAG) é uma abordagem em que um modelo de linguagem não procura conhecimento a cada pergunta. Em vez disso, uma base de conhecimento de dimensão gerível é carregada antecipadamente na sua janela de contexto e esse estado é guardado em cache, pelo que as respostas não precisam de um passo de recuperação separado. O termo foi popularizado por um artigo de investigação do final de 2024 como alternativa à geração aumentada por recuperação (RAG). A CAG adequa-se a bases de conhecimento pequenas e estáveis; para dados volumosos ou que mudam com frequência, a RAG continua normalmente a ser mais prática.
Como o KI.ordo ajuda
Para o conhecimento, o KI.ordo utiliza a pesquisa por palavras-chave BM25 no servidor e guarda em cache componentes de prompt recorrentes com prompt caching, para reduzir custos.
Saber mais : Geração aumentada por cache (CAG)