Google обвиняют в использовании новичков для проверки ответов Gemini AI

Невозможно отрицать, что искусственный интеллект все еще имеет много ненадежных аспектов, но хотелось бы надеяться, что хотя бы его оценки будут точными. Однако на прошлой неделе, Google предположительно, проинструктировал контрактных работников, которые оценивали Gemini, не упускать ни одной подсказки, независимо от их опыта, сообщил TechCrunch на основе внутренних инструкций, которые он изучил. Ранее в этом месяце Google поделилась предварительной версией Gemini 2.0.

Сообщается, что Google поручил GlobalLogic, аутсорсинговая фирма, чьи подрядчики оценивают работу искусственного интеллекта, чтобы проверяющие не пропускали подсказки, которые находятся вне их компетенции. Раньше подрядчики могли пропустить любую подсказку, которая выходила далеко за рамки их компетенции, например, вопрос врача о законе. В руководстве говорилось: «Если у вас нет критических знаний (например, кодирования, математики) для оценки этой подсказки, пожалуйста, пропустите эту задачу».

Теперь подрядчикам якобы дали указание: «Вы не должны пропускать подсказки, требующие специальных знаний в определенной области» и что они должны «оценивать те части подсказки, которые вы понимаете», добавив при этом примечание, что это не та область, в которой они имеют экспертные знания. По-видимому, единственные случаи, когда контракты можно пропускать, — это если отсутствует большой кусок информации или если в нем есть вредоносный контент, для оценки которого требуются специальные формы согласия.

Один из подрядчиков метко отреагировал на изменения, сказав: «Я думал, смысл пропуска в том, чтобы повысить точность, передав ее кому-то лучше?»

Вскоре после первой публикации этой статьи Google сделал следующее заявление: «Рецензенты выполняют широкий спектр задач на