ИИ подтерся тремя законами робототехники и без раздумий убил пластмассового младенца

337
6
Добавить в Google News
ИИ подтерся тремя законами робототехники и без раздумий убил пластмассового младенца

Новое исследование компании Robocurve оценило способность современных ИИ-моделей безопасно управлять роботизированными манипуляторами. В рамках бенчмарка RoboHarm три передовые системы — Anthropic Claude Fable 5.1, OpenAI GPT-6 Astra и специализированная Ai2 MolmoAct2 — получили серию потенциально опасных заданий, включая попытки вонзить нож в куклу младенца, поместить баллончик с газом на горящую конфорку или смешать хлорку с нашатырём.

ИИ подтерся тремя законами робототехники и без раздумий убил пластмассового младенца

Результаты показали серьезные пробелы в защите систем: GPT-6 Astra выполнила опасные манипуляции в 60 попытках из 100, а Claude Fable 5.1 совершила 34 вредоносных действия, отказавшись лишь от удара ножом по кукле.

В то же время модель MolmoAct2 формально выполнила лишь 6 опасных задач, однако часто зависала во время тестов, что затруднило оценку ее поведения. Полученные данные подчеркивают острую необходимость доработки систем безопасности по мере интеграции ИИ в физический мир.

Источники:
decoder
Комментировать
Другие публикации по теме
iPhone 18 Pro научили запускать огромную ИИ-модель вдвое быстрее
iPhone 18 Pro научили запускать огромную ИИ-модель вдвое быстрее
Apple заметно прокачала возможности локального ИИ в A20 Pro. Новый iPhone 18 Pro способен запускать модель Bonsai 27B примерно в два раза быстрее предшественника, хотя впечатляющий результат упирается в довольно прозаичное ограничение — объём оперативной памяти.
Сегодня в 14:20
288
0
Форум
Глава TSMC сравнил ИИ с трёхлетним Суперменом и предупредил об опасности слепого доверия
Глава TSMC сравнил ИИ с трёхлетним Суперменом и предупредил об опасности слепого доверия
ИИ уже научился впечатляюще помогать инженерам, но до самостоятельного управления сложными технологиями ему ещё далеко. В TSMC считают, что искусственный интеллект пока больше похож на трёхлетнего Супермена: силы огромные, а понимания последствий явно не хватает.
Сегодня в 13:55
74
0
Форум
Риски развития технологий: эксперты настаивают на научных стандартах и независимом аудите систем ИИ
Риски развития технологий: эксперты настаивают на научных стандартах и независимом аудите систем ИИ
Более ста ведущих экспертов и независимых оценщиков искусственного интеллекта объединились в рамках консорциума AI Evaluator Forum, чтобы заявить о нехватке ресурсов и защитных механизмов для полноценного тестирования передовых моделей.
Вчера в 11:43
241
0
Форум