O que é Transformador pré-treinado generativo (GPT)?
GPT (generative pre-trained transformer) designa uma série de grandes modelos de linguagem desenvolvidos pela OpenAI e baseados na arquitetura transformer. Os modelos são primeiro pré-treinados com enormes quantidades de texto para prever o token seguinte e depois treinados para o diálogo e para seguir instruções. O primeiro modelo GPT surgiu em 2018; as gerações posteriores estão na base do ChatGPT. Na linguagem corrente, "GPT" é muitas vezes usado para modelos de linguagem em geral.