Специалист по оценке персонализации ИИ (русский язык)

Вы будете оценивать персонализированный диалоговый ИИ, создавая многошаговые промпты на основе личного контекста и проверяя, как модели используют соответствующую информацию. Вы будете выявлять неточную персонализацию, необоснованные догадки, галлюцинации, искусственные связи и излишнее повествование.

Вы будете сравнивать ответы модели, объяснять свои решения, приводя четкие доказательства из диалога, и проверять, правильно ли использовались краткие изложения и источники данных. Вы также будете удалять диалоги, использованные для оценки, в рамках строгого соблюдения правил обработки данных.

• Создание и запуск многошаговых промптов, тестирующих использование личного контекста.
• Проверка того, следуют ли ответы исходному промпту и уместно ли используют персонализацию.
• Проверка того, подтверждаются ли утверждения о пользователе имеющимися данными.
• Сравнение и ранжирование ответов по степени полезности, удобству использования, естественности и общему качеству.
• Написание кратких обоснований со ссылками на конкретные реплики в диалоге.
• Анализ отладочной информации и удаление диалогов после завершения оценки.

Условия и требования

Это удаленная работа по контракту на условиях неполной занятости продолжительностью три месяца. Вакансия открыта для кандидатов со всего мира, требуется уверенное владение русским языком на уровне чтения и письма.

• Оплата: $15 в час.
• Доступность: не менее 4 часов в день, до 40 часов в неделю.
• Часовой пояс: не менее 4 часов пересечения с Тихоокеанским временем.
• Занятость: 20 или более часов в неделю.
• Язык: уверенное владение русским языком на уровне чтения и письма.
• Навыки: сильное аналитическое мышление, пристальное внимание к тонким различиям и навыки четкой письменной коммуникации.
• Опыт: способность создавать креативные многошаговые промпты и распознавать неточную персонализацию, необоснованные выводы, галлюцинации и искусственные связи.
• Требования: надежный настольный компьютер или ноутбук, подключение к интернету, а также готовность использовать основной личный аккаунт Google и подключить соответствующие источники личных данных.
• Желательный опыт: степень бакалавра или эквивалентный опыт работы в области политологии, юриспруденции, этики, лингвистики, журналистики, компьютерных наук или в смежной аналитической сфере.
• Желательный опыт: разметка данных, оценка качества ИИ, модерация контента или аналогичная работа.

Как проходит процесс

Подайте заявку на OpenTrain, прикрепив свое резюме, а затем завершите оформление заявки на сайте работодателя.

О работе по обучению ИИ

Работа по обучению ИИ — это человеческий фактор в создании искусственного интеллекта. Специалисты по оценке проверяют ответы моделей и предоставляют обоснованную обратную связь, чтобы системы ИИ становились более точными, полезными и естественными.