O que é Extração do prompt de sistema?
A extração do prompt de sistema designa as tentativas de levar um chatbot ou agente de IA a revelar as suas instruções de sistema ocultas. Se essa tentativa tiver êxito, o resultado chama-se fuga de prompt: a extração é o ataque, a fuga é a consequência. Uma proteção eficaz começa por manter palavras-passe, chaves e regras confidenciais fora das instruções e por partir do princípio de que podem tornar-se públicas; verificações das entradas e testes regulares acrescentam outras salvaguardas.
Como o KI.ordo ajuda
O modelo «Auditoria de segurança do chatbot» do KI.ordo verifica as instruções de um agente quanto a riscos como a divulgação de instruções de sistema e fornece perguntas de autoteste inofensivas.
Saber mais : Extração do prompt de sistema