Аналитик качества ИИ: персонализация (русский язык)

Вы будете тестировать, как разговорный ИИ использует личный контекст. Вы будете составлять промпты для многоходовых диалогов, проверять ответы моделей и оценивать персонализацию: насколько она точна, полезна, естественна и обоснована фактами.

• Составлять и запускать промпты для многоходовых диалогов с опорой на личный контекст.
• Проверять, соответствуют ли ответы заданному промпту и корректно ли в них задействована нужная информация.
• Выявлять неточную персонализацию, необоснованные выводы, галлюцинации, надуманные связи и лишние повествовательные элементы.
• Сравнивать и ранжировать ответы по полезности, удобству, естественности и общему качеству.
• Писать емкие обоснования с опорой на конкретные реплики диалога, раскрывая сильные стороны ответов и обнаруженные проблемы.
• Проверять отладочную информацию, контролируя корректность использования саммари диалогов и источников данных.
• Удалять диалоги, использованные для оценки, чтобы строго соблюдать правила гигиены данных.

Условия и требования

Удаленная проектная работа на контрактной основе с частичной занятостью сроком на три месяца.

• Оплата: $15 в час.
• График: не менее 20 часов в неделю, возможность уделять проекту не менее 4 часов в день и вплоть до 40 часов в неделю.
• Часовой пояс: обязательно не менее 4 часов пересечения с тихоокеанским временем (PT).
• Локация: удаленно из любой точки мира.
• Язык: уверенные навыки чтения и письма на русском языке.
• Требования: сильное аналитическое мышление, внимание к мелким деталям, ясная письменная речь и умение работать самостоятельно.
• Требования: опыт составления нестандартных многошаговых промптов на основе личного контекста и умение выявлять недостоверные или неподтвержденные утверждения модели.
• Требования: надежный компьютер или ноутбук и стабильное интернет-подключение.
• Требования: готовность использовать основной личный аккаунт Google и подключить необходимые персональные источники данных для проведения оценки.
• Будет плюсом: степень бакалавра или эквивалентный опыт работы в области государственной политики, права, этики, лингвистики, журналистики, информатики или смежной аналитической дисциплины.
• Будет плюсом: опыт в разметке данных, оценке качества ИИ, модерации контента или смежной деятельности.

Как устроен процесс

Откликнитесь на OpenTrain, прикрепив резюме, а затем заполните заявку на сайте найма. На OpenTrain находят вакансии по обучению ИИ, создают профиль и подают заявки на работу.

О работе по обучению ИИ

Обучение ИИ — это работа людей, стоящая за современными системами искусственного интеллекта. Специалисты создают обучающие примеры, проверяют ответы моделей и объясняют проблемы с качеством, чтобы системы ИИ выдавали более точные и полезные результаты.