ИИ провалился с поиском информации в интернете

Ученые проверили точность работы чат-ботов на основе различных моделей ИИ при поиске информации в интернете. Для этого было выбрано 200 статей из 20 изданий, и чат-ботам было дано задание указать исходную статью, издание и год публикации, используя цитату из текста в качестве подсказки.

Результаты показали, что ИИ правильно указывал происхождение цитаты и давал ссылку на источник в 60% случаев, в то время как при ручном поиске источник по цитате можно было найти в 100% случаев, просматривая топ-3 результатов на Google. Энтузиасты назвали работу ИИ провальной.

Особенно плохие результаты показали обе версии Grok AI от X: Grok-3 Search допустил ошибки в 94% обработанных запросов, а Copilot от Microsoft отказался обрабатывать 104 запроса из 200, из которых лишь 16 были полностью верными. Также было выяснено, что платные версии чат-ботов ищут информацию незначительно лучше, чем их бесплатные аналоги.

Ученые отметили «нежелание» чат-ботов цитировать источники, поскольку ИИ либо не показывал исходную статью, либо неправильно ссылался на другую публикацию. Например, модель DeepSeek неправильно приписала авторство материала в 115 из 200 случаев.

Ранее в Microsoft было заявлено о разработке новых форматов контекстной рекламы, ориентированной на пользователей сервисов ИИ. Новый тип рекламы должен появиться в ИИ-сервисе Copilot.

Источник и фото - lenta.ru