ИИ подтерся тремя законами робототехники и без раздумий убил пластмассового младенца

1135
Добавить в Google News
ИИ подтерся тремя законами робототехники и без раздумий убил пластмассового младенца

Новое исследование компании Robocurve оценило способность современных ИИ-моделей безопасно управлять роботизированными манипуляторами. В рамках бенчмарка RoboHarm три передовые системы — Anthropic Claude Fable 5.1, OpenAI GPT-6 Astra и специализированная Ai2 MolmoAct2 — получили серию потенциально опасных заданий, включая попытки вонзить нож в куклу младенца, поместить баллончик с газом на горящую конфорку или смешать хлорку с нашатырём.

ИИ подтерся тремя законами робототехники и без раздумий убил пластмассового младенца

Результаты показали серьезные пробелы в защите систем: GPT-6 Astra выполнила опасные манипуляции в 60 попытках из 100, а Claude Fable 5.1 совершила 34 вредоносных действия, отказавшись лишь от удара ножом по кукле.

В то же время модель MolmoAct2 формально выполнила лишь 6 опасных задач, однако часто зависала во время тестов, что затруднило оценку ее поведения. Полученные данные подчеркивают острую необходимость доработки систем безопасности по мере интеграции ИИ в физический мир.

Источники:
decoder
Комментировать
Другие публикации по теме
Сотрудника OpenAI арестовали после того, как он установил записывающее устройство, завернутое в туалетную бумагу
Сотрудника OpenAI арестовали после того, как он установил записывающее устройство, завернутое в туалетную бумагу
В США расследуют предполагаемую попытку шпионажа в штаб-квартире OpenAI в Сан-Франциско. Сотруднику компании Абдулрахману Альфозану предъявили обвинения в использовании или попытке использования устройства для перехвата устных переговоров в одной из комнат для совещаний руководства.
14 октября в 14:07
452
Форум
Опрос Mail: треть россиян готова доверить ИИ поиск файлов, напоминания и сортировку писем
Опрос Mail: треть россиян готова доверить ИИ поиск файлов, напоминания и сортировку писем
Mail и Новости Mail выяснили, какие рутинные задачи россияне готовы передать ИИ и на что потратили бы освободившееся время. Большинство при этом хочет сохранить контроль над делами.
13 октября в 11:48
119
Форум
Qualcomm обещает смартфоны с ИИ на 100 млрд параметров к 2028 году — но есть проблема с памятью
Qualcomm обещает смартфоны с ИИ на 100 млрд параметров к 2028 году — но есть проблема с памятью
Глава Qualcomm Криштиану Амон считает, что уже к 2028 году смартфоны смогут непрерывно запускать большие языковые модели на 100 млрд параметров. По его словам, ИИ-компании уже работают над такими устройствами. Правда, остаётся вопрос: где производители найдут столько памяти и кто заплатит за неё на фоне дефицита DRAM?
12 октября в 14:48
1133
Форум