Anthropic обнаружила сотни тысяч поддельных аккаунтов для копирования Claude

Изображение: Magnific.com
Компания Anthropic обнаружила сети из сотен тысяч поддельных аккаунтов, через которые злоумышленники пытались копировать возможности нейросети Claude. Разработчик утверждает, что новые средства защиты позволили сократить объем извлекаемых данных на 90–99%.

Схема строилась на массовой отправке запросов к Claude. Полученные ответы собирали для обучения других нейросетей. Особенно интересовали злоумышленников подробные рассуждения модели: они помогают понять, как Claude решает задачи, и воспроизвести эти возможности в собственных разработках. 

Anthropic уже пыталась закрыть доступ к подробным рассуждениям, заменив их краткими объяснениями. Но ограничение удалось обойти. В одном из случаев злоумышленники проверили 12 тыс. специально составленных запросов, пытаясь заставить Claude раскрыть скрытую информацию. Затем появились сети посреднических сервисов с сотнями тысяч поддельных аккаунтов. Когда одну учетную запись блокировали, ее место занимала другая. Некоторые аккаунты регистрировали с использованием чужих платежных данных.

Компания изменила механизм защиты. Теперь специальные алгоритмы отслеживают попытки получить скрытые рассуждения Claude. Разработчики также ограничили перенос этих данных между разными версиями нейросети и аккаунтами. По оценке Anthropic, после изменений объем извлекаемой информации сократился в 10–100 раз. Десятки тысяч подозрительных учетных записей были заблокированы, в отдельных случаях — менее чем через два часа после начала атаки.

Обойтись без последствий для обычных клиентов не получилось. Некоторым разработчикам пришлось переделывать подключение к Claude, а часть разрешенных запросов система ошибочно принимает за попытки копирования модели. В Anthropic утверждают, что доля таких ошибок не превышает 0,1%. Компания ожидает новых попыток обхода защиты и не исключает, что нынешние ограничения со временем перестанут работать.

Ранее ICT-Online писал о скандале вокруг китайских разработчиков DeepSeek и Moonshot AI, которые перенаправляли запросы пользователей к Claude. По информации Anthropic, в одном из эпизодов за десять дней через 5380 учетных записей прошло почти 300 тыс. запросов.

Автор: Анатолий Хаблюк.

Тематики: Безопасность

Ключевые слова: Искусственный интеллект, Нейросети