Один запрос, семь ИИ-поисковиков, ноль общих источников
Результаты оказались парадоксальными. Ни один источник не встретился в ответах всех семи систем, что можно было бы счесть признаком здорового разнообразия. Однако три модели от разных разработчиков выдали абсолютно одинаковые списки ссылок, слово в слово. Причина выяснилась при ближайшем рассмотрении: все три используют один и тот же плагин для веб-поиска, который и формирует подборку сайтов. Таким образом, внешне конкурирующие ассистенты на деле зависят от одного и того же поставщика данных, и их уникальность оказывается мнимой.
Эта находка заставляет задуматься о доверии к рекомендациям ИИ. Если пользователь не проверяет источники, он может получить однобокую картину, а системные ошибки будут множиться, переходя из одного сервиса в другой. В исследовании также были выделены пять факторов, способных исказить подобные замеры: кэширование страниц, геолокация, персонализация, различия в датах индексации и технические ограничения API. Все это говорит о том, что даже независимые на первый взгляд ИИ-поисковики могут иметь общую основу, и полагаться на их ответы стоит с известной долей осторожности.
Эксперимент носит ограниченный характер, но он наглядно демонстрирует важную проблему: индустрия генеративного поиска пока не готова раскрывать детали работы своих алгоритмов. Отсутствие прозрачности создает риск для пользователей, все чаще полагающихся на ИИ в важных вопросах. Возможно, пришло время для стандартов, обязывающих разработчиков сообщать, какие источники и в каком объеме влияют на формирование ответов.
Источник: habr.com
Поделиться