Новость
Уязвимость ИИ-агентов к инъекциям промптов и архитектурная защита
Статья рассматривает риски prompt injection в системах с ИИ-агентами, способные привести к утечке данных или нежелательным действиям при наличии широких полномочий. Описываются принципы построения защиты на уровне архитектуры, включая разделение доверия и контроль действий агента, с примерами реализации на Python.