成都·武侯区
职位详情
职位描述：
1. 负责大模型自动化评测的效果分析，具备良好的数据洞察力，持续追踪关键评测指标，识别模型的能力短板、特性表现及优劣势，挖掘评测优化潜力，撰写评测分析报告，并建立完善的评测异常响应机制
2. 参与评测数据集及评测体系的日常维护，结合业务发展和用户体验反馈，独立或带领团队推进评测任务执行，完成评测集的更新与迭代优化
3. 数据与流程管理：维护模型评测相关的数据记录、参数配置及指标信息；统筹评测资源调配并跟进资源需求落地；负责成本数据监控、看板建设及相关维护工作
职位要求：
1. 本科及以上学历，计算机科学、人工智能、数学、统计学或相关专业优先，985/211院校背景优先
2. 具备较强的责任意识和团队协作精神，能够独立或带队高效完成工作任务
3. 熟练掌握Python，具备数据分析、数据处理及流程优化能力
4. 熟悉提示工程、Functioncall、Agent等基本概念，有模型评测实践经验者优先
1. 负责大模型自动化评测的效果分析，具备良好的数据洞察力，持续追踪关键评测指标，识别模型的能力短板、特性表现及优劣势，挖掘评测优化潜力，撰写评测分析报告，并建立完善的评测异常响应机制
2. 参与评测数据集及评测体系的日常维护，结合业务发展和用户体验反馈，独立或带领团队推进评测任务执行，完成评测集的更新与迭代优化
3. 数据与流程管理：维护模型评测相关的数据记录、参数配置及指标信息；统筹评测资源调配并跟进资源需求落地；负责成本数据监控、看板建设及相关维护工作
职位要求：
1. 本科及以上学历，计算机科学、人工智能、数学、统计学或相关专业优先，985/211院校背景优先
2. 具备较强的责任意识和团队协作精神，能够独立或带队高效完成工作任务
3. 熟练掌握Python，具备数据分析、数据处理及流程优化能力
4. 熟悉提示工程、Functioncall、Agent等基本概念，有模型评测实践经验者优先
2025-12-02 11:30
IP属地：四川成都
职位福利
本科经验不限图像标注语音标注音频标注视频标注
江苏成功企业管理有限公司苏州分公司
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
收藏职位
