Co je Únik promptu (prompt leaking)?
Únik promptu označuje nezamýšlené odhalení interních pokynů AI systému, například když chatbot na šikovně formulovanou žádost prozradí svůj systémový prompt. Stává se problémem, pokud tyto pokyny obsahují obchodní logiku, interní informace nebo dokonce přístupové údaje. Seznam OWASP pro aplikace LLM toto riziko výslovně uvádí. Nejúčinnější ochranou je psát pokyny tak, jako by se mohly stát veřejnými, nikdy do nich neukládat tajné údaje a kontrolovat také výstupy.
Jak pomáhá KI.ordo
Šablona KI.ordo „Audit bezpečnosti chatbota“ pomáhá zkontrolovat pokyny agenta z hlediska tohoto rizika; hesla a další tajné údaje by v nich nikdy neměly být.
Zjistit více : Únik promptu (prompt leaking)