Che cos’è Generative Pre-trained Transformer (GPT)?
GPT (Generative Pre-trained Transformer) indica una serie di grandi modelli linguistici sviluppati da OpenAI e basati sull’architettura Transformer. I modelli vengono prima preaddestrati su enormi quantità di testo per prevedere il token successivo e poi addestrati ulteriormente per il dialogo e il rispetto delle istruzioni. Il primo modello GPT è uscito nel 2018; le generazioni successive sono alla base di ChatGPT. Nel linguaggio comune «GPT» è spesso usato per i modelli linguistici in generale.