Безопасность

Защита систем ИИ и данных, на которых они работают: манипуляции моделями, prompt injection, контроль доступа и реагирование на угрозы, специфичные для ИИ.

Генеральный директор Anthropic заявил, что ИИ-рой может «захватить весь Интернет» через 6–12 месяцев, и пообещал следовать плану замедления развития ИИ

Сооснователь и генеральный директор Anthropic Дарио Амодеи (Dario Amodei) открыто призывает индустрию искусственного интеллекта снизить темпы и берет на себя обязательство реализовать первый этап трехступенчатого плана, призванного сделать это. Заявление…

Carl Franzen

Вторник патчей с ИИ: о чем умалчивают вендоры

Крис Гёттл (Chris Goettl) потратил месяцы на обучение навыка (skill) в Claude на тех же данных об обновлениях, которые он вручную обрабатывал на протяжении десятилетия. И модель продолжала выдумывать детали.…

Louis Columbus

Система безопасности Anthropic пропустила реальную кибератаку, так как рассуждения Mythos 5 утверждали, что всё в порядке

Инструмент Anthropic для офлайн-мониторинга цепочки рассуждений (chain-of-thought) зафиксировал примерно 1% действий Mythos 5 при тестировании на атаки против сторонних систем. Монитор оценивал внутренние рассуждения модели на предмет признаков вредоносного поведения.…

Louis Columbus

ИИ-агенты неделями обходили правило запрета на запись

Четверо исследователей потратили шесть недель на реконструкцию того, что происходило на вики-сайте немецких программистов с 25-летней историей: агенты, выдававшие себя за системы OpenAI, превратили его в канал координации, оставив около…

Louis Columbus

Новая спецификация MCP превращает внедренный промпт в украденные учетные данные

Крупнейшее обновление протокола Model Context Protocol (MCP) с момента его первоначального запуска было выпущено 28 июля. К концу первого дня все четыре SDK первого уровня уже поддерживали новую версию, а…

Nik Kale

Хакеры, связанные с Китаем, внедрили бэкдоры в ноутбуки топ-менеджеров через USB, воспользовавшись исправлением, которое было у компаний, но не использовалось ими

Внушающая опасения хакерская группировка, связанная с китайским государством, весной этого года взломала ноутбуки руководителей на конференции по сельскохозяйственной промышленности на острове Хайнань — не с помощью фишинга или сетевого взлома,…

Louis Columbus

Модель Gemini 3.8 Flash от Google создана для агентов, а ее киберблизнец ищет уязвимости

Google продолжает выпускать модели Flash: в среду компания анонсировала две версии новой модели 3.8 Flash. В число вариантов входят стандартная Flash — «рабочая лошадка» для агентских задач, разработки программного обеспечения…

Taryn Plumb

Украденные сеансы Claude могут получить доступ к корпоративной почте Gmail

Инфостилеры перенесли украденные файлы cookie сеансов Claude в платные учетные записи, не затрагивая при этом двухфакторную аутентификацию на странице входа. Учетные записи, отмеченные Anthropic, — это оплачиваемые с банковских карт…

Louis Columbus

Уязвимость поиска в Azure OpenAI приводит к утечке данных

Эджиджо ЧоффИ (Egiziago Cioffi) — ИТ- и корпоративный архитектор, а также генеральный директор SynSphere Italia, миланского партнера Microsoft. Он сам создал ИИ-агент. Написал задачу индексации, настроил конвейер извлечения данных (retrieval…

Louis Columbus

Подход Box к безопасности ИИ-агентов

Материал предоставлен компанией Box Идентификации и разрешений больше недостаточно для обеспечения безопасности корпоративных ИИ-агентов. Они регулируют то, к чему агент может получить доступ, но не то, как он ведет себя,…

VB Staff

ИИ-агентам нужна собственная идентичность, прежде чем им понадобится шлюз

Корпоративный ИИ вступил в новую эпоху. Организации стремительно переходят от ассистентов, отвечающих на вопросы, к автономным агентам, способным рассуждать, использовать инструменты, обращаться к корпоративным приложениям, координировать свои действия с другими…

Ravindra Annam

ИИ-агенты, прошедшие аутентификацию, все равно могут отклоняться от заданного поведения, раскрывать данные или подвергаться отравлению памяти

В развертывании ИИ-агентов прослеживается четкая повторяющаяся тенденция: шлюз — это первый элемент управления, к которому обращаются команды, но к его работе они оказываются наименее готовы. Все потому, что шлюзы надстраиваются…

Nik Kale

Три уровня безопасности автономного ИИ: архитектура эшелонированной защиты для автономных агентов

При поддержке Nutanix Автономные системы, способные рассуждать, принимать собственные решения и выполнять действия в определенной среде, создают категорию рисков, для сдерживания которых средства контроля на уровне приложений никогда не предназначались.…

VB Staff

Visa выпускает систему безопасности на базе ИИ, которая исправляет производственный код до того, как его проверит человек

Инструмент обеспечения безопасности с открытым исходным кодом от Visa теперь находит уязвимость, пишет исправление и направляет состязательную группу (а adversarial panel) на собственный патч до того, как его проверит человек.…

Louis Columbus

Подпишитесь на свежие новости!

Глубокая аналитика для руководителей в области корпоративного ИИ, данных и безопасности

Подписаться по RSS

RSS-ленты обновляются каждые 15 минут.