В масштабных проектах по дообучению языковых моделей занято больше 10 тысяч внешних специалистов. Создатели ChatGPT прямо запрещают им привлекать сторонние алгоритмы, опасаясь быстрого падения качества ответов в собственных системах.
Один из уволенных исполнителей уже подтвердил потерю контракта из-за нейросетей.
Контролем качества занимается партнер разработчика, платформа Mercor. Сервис использует автоматические детекторы и сразу исключает разметчиков из базы при малейшем подозрении на автоматизацию.
Для индустрии такая халтура грозит сбоями: часть исполнителей признается, что выбирает неудачные ответы или ставит оценки наугад, искажая выборки и закладывая системные ошибки в будущие модели.
Что это значит
Работу удаленных помощников теперь стоит проверять строже: соблазн втайне сдать ответы от нейросети появился даже на серьезных проектах.