成都·武侯区
职位详情
鹅厂外包岗位，线上面试，双休，五险一金
能力要求：（满足1项即可）
1. 具备workflow或agent搭建经历
2. 具有批量调用大模型数据的实操经验
3. 具备处理大规模数据（200条以上）分析的能力
4. 熟悉系统提示词编写，并曾用于优化大模型输出表现
【岗位职责】
1. 对大模型自动化评测流程生成的结果开展系统性核查与质量评估
2. 检查每道评测题目的考点标注是否准确、完整、无遗漏，对裁判模型或自动评分结果进行人工复核，识别误判与漏判情况，统计并记录判定准确率
3. 审查题目质量，涵盖题目设计的合理性、场景还原程度及区分效果
4. 结合不同用户画像（如年龄、性别、身份背景等），从真实用户角度出发，评估模型回答的实际效果与交互体验
5. 对校验过程中发现的问题进行分类标记与归因分析，形成结构化质量反馈报告，助力评测机制持续改进
6. 跟进自动化评测规则与标准的更新迭代，确保人工审核工作与最新规范保持一致
【任职要求】
1. 本科及以上学历，心理学、教育学、中文、社会学、新闻传播等文科相关专业优先
2. 具备良好共情力，能灵活切换用户视角进行体验判断
3. 语言理解能力突出，对语气、措辞及情感表达的细微差别敏感
4. 思维逻辑清晰，具备问题发现与分析能力，可独立识别题目设计缺陷及自动评分中的异常偏差
5. 工作认真细致，能够长期保持判断标准的一致性与稳定性
6. 有大模型标注、模型评测、数据质检或内容审核等相关经验者优先
【加分项】
- 深度使用过ChatGPT、Gemini、Kimi、豆包等AI产品
- 具备QAV测试或数据质量管理相关工作经验
- 了解NLP、大模型评测或PE相关基础概念（如RLHF、评测指标等）
能力要求：（满足1项即可）
1. 具备workflow或agent搭建经历
2. 具有批量调用大模型数据的实操经验
3. 具备处理大规模数据（200条以上）分析的能力
4. 熟悉系统提示词编写，并曾用于优化大模型输出表现
【岗位职责】
1. 对大模型自动化评测流程生成的结果开展系统性核查与质量评估
2. 检查每道评测题目的考点标注是否准确、完整、无遗漏，对裁判模型或自动评分结果进行人工复核，识别误判与漏判情况，统计并记录判定准确率
3. 审查题目质量，涵盖题目设计的合理性、场景还原程度及区分效果
4. 结合不同用户画像（如年龄、性别、身份背景等），从真实用户角度出发，评估模型回答的实际效果与交互体验
5. 对校验过程中发现的问题进行分类标记与归因分析，形成结构化质量反馈报告，助力评测机制持续改进
6. 跟进自动化评测规则与标准的更新迭代，确保人工审核工作与最新规范保持一致
【任职要求】
1. 本科及以上学历，心理学、教育学、中文、社会学、新闻传播等文科相关专业优先
2. 具备良好共情力，能灵活切换用户视角进行体验判断
3. 语言理解能力突出，对语气、措辞及情感表达的细微差别敏感
4. 思维逻辑清晰，具备问题发现与分析能力，可独立识别题目设计缺陷及自动评分中的异常偏差
5. 工作认真细致，能够长期保持判断标准的一致性与稳定性
6. 有大模型标注、模型评测、数据质检或内容审核等相关经验者优先
【加分项】
- 深度使用过ChatGPT、Gemini、Kimi、豆包等AI产品
- 具备QAV测试或数据质量管理相关工作经验
- 了解NLP、大模型评测或PE相关基础概念（如RLHF、评测指标等）
2026-07-22 12:16
IP属地：四川成都
职位福利
本科经验不限语音标注音频标注文本标注AGENTPE模型调优数据分析提示词自动化评估
软通动力信息技术（集团）股份有限公司
已上市 · 10000人以上
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
数据标注---大模型
4000-5000元/月
数据标注/AI训练师经验不限大专数据标注文本标注不接受居家办公语音标注标注结果整理标注数据分析数据分析能力强分类标注
成都 武侯区
数据标注项目现场专员
5000-7000元/月
数据标注/AI训练师1-3年大专数据标注自动驾驶不接受居家办公数据分析能力强描点标注标注方法优化区域标注标框标注接受加班图片标注
成都 武侯区
收藏职位
