Czym jest Pośredni prompt injection?
W pośrednim prompt injection manipulacyjne polecenia nie znajdują się w danych wejściowych użytkownika, lecz są ukryte w treściach, które system AI przetwarza przy okazji, takich jak strony internetowe, e-maile czy dokumenty. Gdy agent odczytuje taką treść, może wziąć ukryte polecenia za prawdziwe zadania i na przykład ujawnić dane. Zabezpieczenia to traktowanie treści zewnętrznych wyłącznie jako danych, ograniczanie uprawnień, kontrola danych wejściowych i wymaganie zatwierdzenia przez człowieka dla działań krytycznych.
Jak pomaga KI.ordo
KI.ordo oferuje gotowy szablon zapory AI, który można umieścić przed agentem jako dodatkową warstwę kontroli, na przykład gdy treści docierają przez narzędzie do odczytu stron internetowych.
Dowiedz się więcej : Pośredni prompt injection