Ce este Prompt leaking?
Prompt leaking (scurgerea promptului) desemnează dezvăluirea neintenționată a instrucțiunilor interne ale unui sistem de IA, de exemplu atunci când un chatbot își dezvăluie promptul de sistem ca răspuns la o solicitare formulată abil. Devine o problemă dacă acele instrucțiuni conțin logică de business, informații interne sau chiar date de acces. Lista OWASP pentru aplicațiile LLM menționează explicit acest risc. Cea mai eficientă protecție este să scrieți instrucțiunile ca și cum ar putea deveni publice, să nu stocați niciodată secrete în ele și să verificați și rezultatele.
Cum ajută KI.ordo
Șablonul KI.ordo „Audit de securitate pentru chatbot” ajută la verificarea instrucțiunilor agenților în privința acestui risc; parolele și alte secrete nu trebuie niciodată incluse în ele.
Aflați mai multe : Prompt leaking