Słownik pojęć

Duży model językowy (LLM)

Czym jest Duży model językowy (LLM)?

Duży model językowy (LLM) to sieć neuronowa wytrenowana na bardzo dużych ilościach tekstu, dzięki czemu potrafi rozumieć i generować język. Działa, obliczając krok po kroku najbardziej prawdopodobny kolejny token. LLM-y piszą, streszczają, tłumaczą, odpowiadają na pytania i generują kod; znane przykłady to Claude, GPT, Gemini i Llama. Bez dostępu do aktualnych źródeł wiedzą tylko to, co znajdowało się w ich danych treningowych.

Jak pomaga KI.ordo

KI.ordo korzysta z dużych modeli językowych z rodziny Claude firmy Anthropic i łączy je z instrukcjami oraz własną wiedzą Państwa firmy.

Dowiedz się więcej

Tematy

modele językowe
generatywna AI
pojęcie podstawowe

Wypróbuj KI.ordo

Agenci, przepływy i szablony w jednym obszarze roboczym – bezpłatne demo na 24 godziny.

Uruchom demo

← Wszystkie pojęcia

Powiązane pojęcia

Transformer

Transformer to architektura sieci neuronowych przedstawiona w 2017 roku w artykule naukowym „Attention Is All You Need”. Jej rdzeniem jest mechanizm uwagi: każde słowo jest ważone w relacji do wszystkich pozostałych słów w tekście, a obliczenia można efektywnie zrównoleglać. Transformery stanowią podstawę dzisiejszych modeli językowych, takich jak GPT, Claude i BERT, i są też wykorzystywane do obrazów i dźwięku.

Architektura
Deep learning
+1

Token

Token to najmniejsza jednostka tekstu przetwarzana przez model językowy, zazwyczaj fragment słowa, krótkie słowo lub znak interpunkcyjny. Modele odczytują dane wejściowe i generują odpowiedzi token po tokenie, a rozmiar okna kontekstu również mierzy się w tokenach. Ponieważ dostawcy rozliczają tokeny wejściowe i wyjściowe, tokeny bezpośrednio decydują o kosztach i limitach: długie instrukcje i obszerna wiedza w tle zwiększają zużycie.

LLM
Koszty
+1

Model bazowy (foundation model)

Model bazowy (foundation model) to duży model AI wstępnie wytrenowany na bardzo obszernych i zróżnicowanych danych, który można następnie wykorzystać do wielu różnych zadań. Pojęcie to wprowadzono na Uniwersytecie Stanforda w 2021 roku. Znane przykłady to duże modele językowe, takie jak Claude czy GPT, a także modele obrazów. Firmy zwykle budują swoje aplikacje na takich modelach, zamiast trenować własne od podstaw; unijny AI Act odnosi się do modeli AI ogólnego przeznaczenia.

Model podstawowy
modele językowe
+1

Claude

Claude to rodzina dużych modeli językowych amerykańskiej firmy Anthropic, zajmującej się AI. Modele rozumieją i piszą teksty w wielu językach, analizują dokumenty, piszą kod i mogą korzystać z narzędzi, na przykład do researchu lub automatyzacji. Najbardziej znane są rodziny modeli Haiku, Sonnet i Opus, które różnią się szybkością, kosztem i możliwościami. Anthropic kładzie szczególny nacisk na bezpieczeństwo i niezawodne zachowanie modeli.

Anthropic
model językowy
+1