O que é Fuga de prompt?
A fuga de prompt (prompt leaking) designa a divulgação involuntária das instruções internas de um sistema de IA, por exemplo quando um chatbot revela o seu prompt de sistema em resposta a um pedido habilmente formulado. Isto torna-se um problema se essas instruções contiverem lógica de negócio, informações internas ou até credenciais. A lista OWASP para aplicações LLM refere este risco de forma explícita. A salvaguarda mais eficaz é escrever as instruções como se pudessem tornar-se públicas, nunca nelas guardar segredos e verificar também as saídas.
Como o KI.ordo ajuda
O modelo «Auditoria de segurança do chatbot» do KI.ordo ajuda a verificar as instruções dos agentes quanto a este risco; nunca se devem colocar nelas palavras-passe ou outros segredos.
Saber mais : Fuga de prompt