Glossário

Instruction Tuning

O que é Instruction Tuning?

O instruction tuning é uma forma de fine-tuning em que um modelo de linguagem pré-treinado é treinado mais com muitos pares de instruções e respostas desejadas. Isto ensina o modelo a seguir tarefas formuladas em linguagem natural, em vez de se limitar a continuar o texto. É um passo fundamental para transformar um modelo base num assistente e é frequentemente combinado com métodos como o RLHF. Exemplo: "Resuma este texto em três frases" é executado de forma fiável.

Como o KI.ordo ajuda

O KI.ordo não treina modelos; utiliza os modelos Claude da Anthropic, que já estão treinados como assistentes, e orienta o seu comportamento através de instruções e conhecimento.

Saber mais

Temas

Fine-tuning
Modelos de linguagem
Training

Experimentar o KI.ordo

Agentes, fluxos e modelos num só espaço de trabalho – demonstração gratuita de 24 horas.

Iniciar demonstração

← Todos os termos

Termos relacionados

Fine-tuning

O fine-tuning consiste em continuar a treinar um modelo de IA já pré-treinado com dados adicionais, normalmente específicos de uma tarefa. Os seus pesos internos são ajustados para que o modelo lide de forma mais fiável, por exemplo, com um estilo de escrita, um vocabulário especializado ou um formato de saída particulares. O fine-tuning exige dados de exemplo cuidadosamente preparados, capacidade de cálculo e testes. Para muitas aplicações, instruções bem escritas e conhecimento ligado são suficientes e mais fáceis de alterar.

Treino de modelos
Personalização
+1

Aprendizagem por reforço a partir de feedback humano (RLHF)

O RLHF é um método de treino que torna os modelos de linguagem mais úteis e mais seguros. Pessoas comparam e avaliam várias respostas do modelo; estas avaliações são usadas para treinar um modelo de recompensa, que depois treina o próprio modelo de linguagem através de aprendizagem por reforço. Assim, o modelo aprende, por exemplo, a responder com mais clareza ou a recusar pedidos problemáticos. O RLHF ocorre no fornecedor do modelo, antes de este ser lançado – não junto de utilizadores individuais.

treino
feedback humano
+1

Grande modelo de linguagem (LLM)

Um grande modelo de linguagem (LLM) é uma rede neuronal treinada com quantidades muito grandes de texto, o que lhe permite compreender e gerar linguagem. Funciona calculando, passo a passo, o token mais provável a seguir. Os LLM escrevem, resumem, traduzem, respondem a perguntas e geram código; exemplos conhecidos são o Claude, o GPT, o Gemini e o Llama. Sem acesso a fontes atuais, só sabem o que constava dos seus dados de treino.

Modelos de linguagem
IA generativa
+1

Prompt

Um prompt é a entrada que diz a um modelo de IA o que fazer – uma pergunta, uma tarefa ou uma instrução, muitas vezes complementada com contexto, exemplos e o formato pretendido. A qualidade da resposta depende muito da clareza e da integridade do prompt. Por exemplo, em vez de «Escreve algo sobre o nosso produto», use-se «Escreve três vantagens curtas do produto X para empresas do setor artesanal, num tom factual».

prompting
entrada
+1

Modelo