下载鱼泡直聘APP, 求职招聘快人一步！
打开APP
海淀区
职位详情
PS：需线下参与笔试
岗位要求：1-4年相关经验，薪资10-13k
- 具备算法/研发/数据分析等相关背景者优先，需掌握 Python 或曾自主搭建 agent 流程；
- 具备阅读英文文献的能力（可结合工具辅助）者优先；
岗位职责：
- 评测集复现与优化：跟踪大模型最新评测方法及前沿 Benchmark，探索创新评测维度与指标，依据公司实际需求对评测集进行定制化调整与完善，保障评测过程的可复现性与准确性。
- 自动化评估系统构建：独立搭建大模型评测体系与配套评测集，以自动化评估为核心，覆盖通用能力与特定场景能力，设计科学的指标体系与任务组合，确保评测的全面性与精准性。
- 模型表现分析：定期开展多版本模型的效果测评与横向对比，输出完整的评测报告，定位模型优劣势，提出可行性优化建议，助力明确模型迭代路径与决策支持。
- 跨部门协同：与算法、产品及业务团队高效协作，深入理解应用场景需求，提供评测方案与效果分析支持，推动模型优化与实际业务落地。
岗位要求：1-4年相关经验，薪资10-13k
- 具备算法/研发/数据分析等相关背景者优先，需掌握 Python 或曾自主搭建 agent 流程；
- 具备阅读英文文献的能力（可结合工具辅助）者优先；
岗位职责：
- 评测集复现与优化：跟踪大模型最新评测方法及前沿 Benchmark，探索创新评测维度与指标，依据公司实际需求对评测集进行定制化调整与完善，保障评测过程的可复现性与准确性。
- 自动化评估系统构建：独立搭建大模型评测体系与配套评测集，以自动化评估为核心，覆盖通用能力与特定场景能力，设计科学的指标体系与任务组合，确保评测的全面性与精准性。
- 模型表现分析：定期开展多版本模型的效果测评与横向对比，输出完整的评测报告，定位模型优劣势，提出可行性优化建议，助力明确模型迭代路径与决策支持。
- 跨部门协同：与算法、产品及业务团队高效协作，深入理解应用场景需求，提供评测方案与效果分析支持，推动模型优化与实际业务落地。
2026-02-20 14:39
IP属地：北京
职位福利
大专3-5年AI评测大模型评测自动评估
博彦科技（深圳）有限公司
已上市 · 10000人以上
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
1.5-3万/月
大模型算法1-3年本科RAGFlowLangChainPython & PyTorchDify / FlowiseMilvus大模型推理AgentPrompt 工程
北京 海淀区
收藏职位
