- BrainTools - https://www.braintools.ru -

Perplexity выпустила инструмент BrowseSafe [1], который защищает ИИ-агентов от промпт-инъекций, спрятанных в структуре веб-страниц. Речь идет о скрытых командах, которые злоумышленники размещают в HTML через комментарии, невидимые поля, специальные теги и другие элементы, не отображаемые пользователю. Поскольку ИИ-ассистенты читают страницу полностью, включая такие зоны, их можно заставить выполнять нежелательные действия без ведома человека. BrowseSafe решает эту проблему за счет встроенного анализа: система проверяет поступающий контент в реальном времени и блокирует подозрительные инструкции до того, как они попадут в контекст основной модели.

Одновременно Perplexity представила тестовый набор BrowseSafe-Bench [2]. В него вошло более четырнадцати тысяч сценариев атак, которые позволяют разработчикам проверять устойчивость своих агентов к разным видам промпт-инъекций. Компания отмечает, что существующие защитные решения не покрывают достаточное количество сценариев и плохо выявляют сложные манипуляции, поэтому BrowseSafe создавался как легковесная, но хорошо масштабируемая система, пригодная для работы в реальном вебе.
По словам Perplexity, BrowseSafe особенно важен на фоне роста агентных моделей, которые способны самостоятельно перемещаться по сайтам, читать документы, формировать запросы и выполнять последовательные действия. В таких сценариях даже простая незаметная команда может привести к утечке данных или неправильному поведению [3] модели. BrowseSafe дополняет инфраструктуру компании и должен стать основой для безопасного развития ИИ-браузеров.
Делегируйте часть рутинных задач вместе с BotHub! [4] Для доступа к сервису не требуется VPN и можно использовать российскую карту. По ссылке [5] вы можете получить 100 000 бесплатных токенов для первых задач и приступить к работе с нейросетями прямо сейчас!
Автор: cognitronn
Источник [6]
Сайт-источник BrainTools: https://www.braintools.ru
Путь до страницы источника: https://www.braintools.ru/article/22786
URLs in this post:
[1] BrowseSafe: https://huggingface.co/perplexity-ai/browsesafe
[2] BrowseSafe-Bench: https://huggingface.co/datasets/perplexity-ai/browsesafe-bench
[3] поведению: http://www.braintools.ru/article/9372
[4] BotHub!: https://bothub.chat/?utm_source=contentmarketing&utm_medium=habr&utm_campaign=news&utm_content=DEEPSEEK-OCR%20+%20LLAMA4%20+%20RAG%20=%20REVOLUTION%20IN%20THE%20WORLD%20OF%20AGENT-BASED%20OCR
[5] По ссылке: https://bothub.chat/?invitedBy=m_aGCkuyTgqllHCK0dUc7
[6] Источник: https://habr.com/ru/companies/bothub/news/973660/?utm_source=habrahabr&utm_medium=rss&utm_campaign=973660
Нажмите здесь для печати.