Mi a(z) Generatív előtanított transzformer (GPT)?
A GPT (generative pre-trained transformer) az OpenAI által fejlesztett, transzformer-architektúrára épülő nagy nyelvi modellek sorozata. A modelleket először hatalmas szövegmennyiségen tanítják elő a következő token megjósolására, majd párbeszédre és utasítások követésére tanítják tovább. Az első GPT-modell 2018-ban jelent meg; a későbbi generációk a ChatGPT alapját képezik. A mindennapi beszédben a „GPT” szót gyakran a nyelvi modellekre általában használják.