Glossário

Fine-tuning

O que é Fine-tuning?

O fine-tuning consiste em continuar a treinar um modelo de IA já pré-treinado com dados adicionais, normalmente específicos de uma tarefa. Os seus pesos internos são ajustados para que o modelo lide de forma mais fiável, por exemplo, com um estilo de escrita, um vocabulário especializado ou um formato de saída particulares. O fine-tuning exige dados de exemplo cuidadosamente preparados, capacidade de cálculo e testes. Para muitas aplicações, instruções bem escritas e conhecimento ligado são suficientes e mais fáceis de alterar.

Como o KI.ordo ajuda

O KI.ordo não volta a treinar modelos; adapta os agentes através de instruções e do seu próprio conhecimento, pelo que as alterações têm efeito imediato.

Saber mais : Fine-tuning

Temas

  • Treino de modelos
  • Personalização
  • Modelos de linguagem

Experimentar o KI.ordo

Agentes, fluxos e modelos num só espaço de trabalho – demonstração gratuita de 24 horas.

Iniciar demonstração
← Todos os termos

Termos relacionados

Afinação eficiente em parâmetros (PEFT)

A afinação eficiente em parâmetros (PEFT) abrange técnicas que adaptam um grande modelo pré-treinado a uma tarefa treinando apenas uma pequena parte dos seus parâmetros ou acrescentando alguns parâmetros adicionais. Entre os métodos mais conhecidos estão o LoRA, o QLoRA, os adaptadores e o prefix tuning. Isto reduz muito as necessidades de cálculo e de memória, e é possível guardar pequenos módulos adicionais para várias tarefas, em vez de cópias completas do modelo. Exemplo: um modelo de linguagem é adaptado ao estilo de documentos técnicos internos.

  • afinação
  • treino
  • +1

Instruction Tuning

O instruction tuning é uma forma de fine-tuning em que um modelo de linguagem pré-treinado é treinado mais com muitos pares de instruções e respostas desejadas. Isto ensina o modelo a seguir tarefas formuladas em linguagem natural, em vez de se limitar a continuar o texto. É um passo fundamental para transformar um modelo base num assistente e é frequentemente combinado com métodos como o RLHF. Exemplo: "Resuma este texto em três frases" é executado de forma fiável.

  • Fine-tuning
  • Modelos de linguagem
  • +1

Transfer Learning

Na aprendizagem por transferência, um modelo que já aprendeu uma grande tarefa geral serve de ponto de partida para uma nova tarefa especializada. Em vez de começar do zero, é adaptado, por exemplo através de afinação, com uma quantidade comparativamente pequena de dados próprios. Isto poupa tempo de cálculo e dados, por exemplo quando um modelo de imagem geral deve aprender a detetar defeitos de produção em fotografias.

  • Aprendizagem automática
  • Training
  • +1

Geração aumentada por recuperação (RAG)

A geração aumentada por recuperação combina pesquisa com geração de texto: antes de responder, o sistema pesquisa numa coleção de conhecimento – como manuais, diretrizes ou FAQ – as passagens relevantes e transmite-as ao modelo de linguagem como contexto. A resposta baseia-se assim em conteúdos atuais e específicos da empresa, e não apenas no conhecimento de treino do modelo. Isto reduz as afirmações inventadas, torna as fontes rastreáveis e permite atualizações sem retreino.

  • RAG
  • pesquisa de conhecimento
  • +1