Hvad er Systemprompt-udtrækning?
Systemprompt-udtrækning betegner forsøg på at få en chatbot eller AI-agent til at afsløre sine skjulte systeminstruktioner. Lykkes et sådant forsøg, kaldes resultatet prompt leaking: udtrækningen er angrebet, lækagen er konsekvensen. Effektiv beskyttelse begynder med at holde adgangskoder, nøgler og fortrolige regler ude af instruktionerne og gå ud fra, at de kan blive offentlige; inputkontroller og regelmæssig testning giver yderligere sikkerhed.
Sådan hjælper KI.ordo
KI.ordo-skabelonen »Sikkerhedstjek af chatbot« gennemgår en agents instruktioner for risici som afslørede systeminstruktioner og leverer harmløse selvtestspørgsmål.
Læs mere : Systemprompt-udtrækning