模型生成内容评测
Text主导构建并执行多层级数据标注和评测体系，涵盖模型评测集的验收标准与高质量数据交付闭环。深入推行盲标与专家仲裁等机制，持续提升标注数据的准确性与纯净度。参与红队对抗及风险点复盘，保障多模态模型训练流程的安全与有效性。 • 建立多层级模型评测验收标准 • 推行多轮质量验收与仲裁闭环 • 组织红队测试分析高风险样本 • 不断迭代SOP与人员准入标准
2025 - Present
For employersInvite to Job
Hire this AI Trainer
Sign in or create an account to invite AI Trainers to your job.
Key Skills
Software
Internal/Proprietary Tooling
Top Subject Matter
Multimodal Model Evaluation and Data Labeling
E-commerce Chatbot AI Evaluation and Training
E-commerce Intent
Top Data Types
Text
VideoTop Task Types
Entity (NER) ClassificationFreelancer Overview
模型生成内容评测. Core strengths include Internal and Proprietary Tooling. AI-training focus includes data types such as Text and labeling workflows including Evaluation, Rating, and Entity (NER) Classification.
Labeling Experience
TextAI训练师
Text全程构建电商大语言模型数据评测框架与对话测试集，涵盖多模态样本和复杂业务场景。落地语料库建设和语义风控子集，强化敏感与长尾对话检测深度。建立数据监控与模型效果闭环驱动持续优化。 • 全链路业务语料整理与测试集设计 • 依功能、风险、内容安全多维度评测 • 组织高风险敏感内容专项检测 • 形成线上监控与实时数据回馈机制
2024 - 2025
数据标注组长
TextEntity (NER) Classification统筹团队系统性完成电商业务数据意图与情感标注任务，制订并持续迭代详细标注规范。负责组织标注技能培训，推动团队协同与高效数据产出。严格实施数据质检和信息安全措施，实现数据高质量交付。 • 意图、槽位、情感等电商标签体系构建 • 编写标准化标注操作流程文件 • 组织团队每日高效生产标注数据 • 建立敏感数据自动脱敏及合规培训机制
2022 - 2024