Оценщики качества поиска Google переключают внимание на рейтинг ответов чат-ботов

По сообщению Insider, с января Google уделяет приоритетное внимание оценке оперативных ответов чат-бота выше оценки качества результатов поиска, по крайней мере, для некоторых своих контрактных сотрудников.

Почему мы заботимся. Google прямо сейчас выделяет много ресурсов на Bard и другие инициативы в области искусственного интеллекта. Поиск остается его основным продуктом — и основным источником дохода — поэтому интересно узнать, что Google настолько сильно инвестирует в Bard, что, как сообщается, они отнимают ресурсы у оценки результатов поиска, что потенциально может повлиять на качество.

Просмотр подсказок ИИ, а не поиск. Оценщикам дается подсказка пользователя (например, вопрос, заявление или инструкция) вместе с двумя возможными ответами, сгенерированными чат-ботом ИИ (имя «Бард» не использовалось). Оценщикам было предложено выбрать лучший ответ.

Но. Оценщики обнаруживают, что угадывают, а не оценивают и проверяют ответы чат-бота. Это связано с тем, что некоторые оценщики сказали, что у них недостаточно времени, чтобы выяснить, какой ответ был лучше, особенно по техническим или сложным темам, с которыми они могут быть не знакомы, согласно Insider.

Так много для EEAT. У оценщиков Google есть определенное количество времени для выполнения своих задач, которое варьируется от 60 секунд до нескольких минут.

• «Три часа исследований для выполнения 60-секундной задачи — отличный способ сформулировать проблему, с которой мы сталкиваемся прямо сейчас», — сказал оценщик Insider.

Оценщики качества поиска. Google нанимает людей-оценщиков по крайней мере с 2005 года, поручая им оценивать качество страниц, веб-сайтов и результатов поиска, используя обширный набор рекомендаций. Google всегда говорил, что отзывы оценщиков не влияют напрямую на ранжирование в органическом поиске, но их отзывы можно использовать для оценки изменений.

Гуглеров также попросили помочь улучшить Bard. Google попросил своих сотрудников потратить 2-4 часа на тестирование Bard, переписывание ответов или предоставление других форм обратной связи, как мы сообщали в феврале.

Прочтите отчет Insider (предупреждение: платный доступ). Подрядчики Google говорят, что у них недостаточно времени, чтобы проверить правильные ответы от чат-бота компании с искусственным интеллектом, и в конечном итоге они угадывают через Томаса Максвелла.