Czym jest Generatywny wstępnie wytrenowany transformer (GPT)?
GPT (generative pre-trained transformer) to seria dużych modeli językowych opracowanych przez OpenAI i opartych na architekturze transformera. Modele są najpierw wstępnie trenowane na ogromnych ilościach tekstu, aby przewidywać kolejny token, a następnie dalej trenowane do prowadzenia dialogu i wykonywania poleceń. Pierwszy model GPT ukazał się w 2018 roku; kolejne generacje stanowią podstawę ChatGPT. W mowie potocznej „GPT” bywa używane w odniesieniu do modeli językowych w ogóle.