海淀区
职位详情
岗位职责：
1、负责生活服务场景下的自动化评测与标注体系建设，围绕业务目标构建可复用的评测流程，涵盖样本处理、任务分解、结果判断、质量抽检、结果归档等关键环节。
2、结合大模型能力与Agent机制，设计并实施自动化评测方案，包括Prompt工程、规则引擎搭建、脚本编写、工具集成及评测链路编排，提升评测效率、稳定性和规模化水平。
3、推进评测与质检流程的脚本化和产品化升级，将高频重复操作转化为标准化模块，支持评测集生成、批量执行、结果归因、自动标记及数据反哺。
4、联动算法、产品、数据运营团队，建立评测结果分析与监控体系，提高问题识别效率，并推动自动化链路持续优化迭代。
5、关注并落地主流AI工具与新型工作流技术，如Agent框架、代码生成工具、Vibe Coding类平台、自动化协作系统等，不断提升评测、标注与质检场景的工作效能。
6、总结自动化评测的模板、脚本、工具组合及实施经验，形成可复制的方法论，助力更多业务快速接入与应用。
任职要求：
1、本科及以上学历，计算机、软件工程、数据科学、人工智能等相关专业优先；具备大模型应用、评测工具开发、数据系统建设或自动化运营背景者优先。
2、具有扎实的技术实现能力，能独立使用Python / SQL / 脚本语言完成数据处理、任务自动化及评测流程开发。
3、了解基于大模型的Prompt设计、Agent流程、自动化评测或自动标注方案，有实际项目落地经验者优先。
4、熟练运用当前主流AI提效工具，能够基于工具快速构建原型与工作流；具备代码生成、Agent编排类工具实操经验者优先。
5、具备良好的结构化思考与问题拆解能力，能将业务需求转化为自动化逻辑、规则体系与可执行脚本，并持续优化效果与稳定性。
6、具备一定的数据分析与结果验证能力，可评估自动化方案表现，发现异常情况，并推动规则、Prompt或流程的迭代改进。
7、拥有较强的学习能力和工具洞察力，乐于跟踪前沿AI工具与新技术，并能迅速应用于实际业务中。
1、负责生活服务场景下的自动化评测与标注体系建设，围绕业务目标构建可复用的评测流程，涵盖样本处理、任务分解、结果判断、质量抽检、结果归档等关键环节。
2、结合大模型能力与Agent机制，设计并实施自动化评测方案，包括Prompt工程、规则引擎搭建、脚本编写、工具集成及评测链路编排，提升评测效率、稳定性和规模化水平。
3、推进评测与质检流程的脚本化和产品化升级，将高频重复操作转化为标准化模块，支持评测集生成、批量执行、结果归因、自动标记及数据反哺。
4、联动算法、产品、数据运营团队，建立评测结果分析与监控体系，提高问题识别效率，并推动自动化链路持续优化迭代。
5、关注并落地主流AI工具与新型工作流技术，如Agent框架、代码生成工具、Vibe Coding类平台、自动化协作系统等，不断提升评测、标注与质检场景的工作效能。
6、总结自动化评测的模板、脚本、工具组合及实施经验，形成可复制的方法论，助力更多业务快速接入与应用。
任职要求：
1、本科及以上学历，计算机、软件工程、数据科学、人工智能等相关专业优先；具备大模型应用、评测工具开发、数据系统建设或自动化运营背景者优先。
2、具有扎实的技术实现能力，能独立使用Python / SQL / 脚本语言完成数据处理、任务自动化及评测流程开发。
3、了解基于大模型的Prompt设计、Agent流程、自动化评测或自动标注方案，有实际项目落地经验者优先。
4、熟练运用当前主流AI提效工具，能够基于工具快速构建原型与工作流；具备代码生成、Agent编排类工具实操经验者优先。
5、具备良好的结构化思考与问题拆解能力，能将业务需求转化为自动化逻辑、规则体系与可执行脚本，并持续优化效果与稳定性。
6、具备一定的数据分析与结果验证能力，可评估自动化方案表现，发现异常情况，并推动规则、Prompt或流程的迭代改进。
7、拥有较强的学习能力和工具洞察力，乐于跟踪前沿AI工具与新技术，并能迅速应用于实际业务中。
2026-05-16 15:00
IP属地：北京
职位福利
本科1-3年评测大模型评测
上海思芮信息科技有限公司
1000-9999人
工作地址
鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为，请立即向鱼泡直聘投诉举报投诉举报 >
附近适合您的职位
plc调试工程师（需常驻项目现场）
8000-12000元/月
自动化工程师1-3年学历不限三菱有电工证变频参数PLC编程电子电气/自动化相关专业伺服电机触摸屏
北京 密云区
王女士 · 鸿锐嘉科技5日内活跃
北京昌平区招聘：项目工程师（驻场）薪资：5000-5000元/月1、基本条件：全日制本科及以上学历，机电自动化
5000-6000元/月
自动化工程师经验不限本科PythonJavaCADSolidWorks电子电气/自动化相关专业
北京 昌平区
王女士 · Gallagher5日内活跃
收藏职位
