ИИ-ответы в поиске Google оказались неточными в каждом десятом случае

403
2
Добавить в Google News
ИИ-ответы в поиске Google оказались неточными в каждом десятом случае

Согласно отчёту The New York Times, встроенные в поиск Google сводки на базе искусственного интеллекта дают ложную информацию примерно в 1 из 10 случаев. С учётом масштабов поисковой системы это может означать десятки миллионов неточных ответов каждый час.

Исследование провёл стартап Oumi, который по просьбе издания протестировал модель Gemini с помощью бенчмарка SimpleQA. Анализ более 4 тысяч запросов показал, что точность ответов выросла с 85% у версии Gemini 2 до 91% у Gemini 3, однако проблема ошибок остаётся заметной.

В Google не согласились с выводами, заявив, что подобные тесты не отражают реального поведения пользователей. При этом внутренние проверки компании показали, что Gemini при работе без поиска допускает ошибки в 28% случаев.

Отдельной проблемой остаётся несоответствие между ответами и источниками. Хотя система пытается подкреплять информацию ссылками, они нередко противоречат самим выводам ИИ. После обновления в феврале доля таких расхождений выросла с 37% до 56%.

Исследователи также отметили уязвимость системы к манипуляциям. В одном из случаев журналист BBC опубликовал ложную информацию, которая уже на следующий день была воспроизведена в ответах поисковика. Подобные риски признают и сами компании: Microsoft предупреждает о возможных ошибках в Copilot, а другие разработчики советуют перепроверять результаты.

Комментировать
Другие публикации по теме
Qualcomm обещает смартфоны с ИИ на 100 млрд параметров к 2028 году — но есть проблема с памятью
Qualcomm обещает смартфоны с ИИ на 100 млрд параметров к 2028 году — но есть проблема с памятью
Глава Qualcomm Криштиану Амон считает, что уже к 2028 году смартфоны смогут непрерывно запускать большие языковые модели на 100 млрд параметров. По его словам, ИИ-компании уже работают над такими устройствами. Правда, остаётся вопрос: где производители найдут столько памяти и кто заплатит за неё на фоне дефицита DRAM?
Вчера в 14:48
380
0
Форум
Надмозг Трамп победил: в США ИИ-компании дружно переходят на слово "суперинтеллект"
Надмозг Трамп победил: в США ИИ-компании дружно переходят на слово "суперинтеллект"
Крупнейшие техногиганты Кремниевой долины начали стремительно переписывать свой лексикон, уступая давлению администрации Дональда Трампа.
Вчера в 13:20
180
0
Форум
Монстр от NVIDIA запускает 2000 ИИ-песочниц быстрее, чем AMD EPYC справляется с тысячей
Монстр от NVIDIA запускает 2000 ИИ-песочниц быстрее, чем AMD EPYC справляется с тысячей
Новый процессор NVIDIA Vera Rubin показал впечатляющие результаты в задачах агентного ИИ. В тестах Daytona он запускал тысячи изолированных сред для выполнения кода значительно быстрее серверных чипов AMD EPYC на архитектуре Zen 5. Разница особенно заметна при одновременной работе большого числа ИИ-агентов.
11 октября в 13:37
4929
0
Форум