职位详情
工作职责:
1. 负责AI类产品(包括大模型应用、智能对话系统、AIGC工具等)的功能、性能、可靠性、数据质量及AI特有维度(如输出一致性、幻觉识别、提示词鲁棒性、偏见与公平性)的测试策略制定与执行;
2. 设计并开发面向AI场景的自动化测试框架与工具链,覆盖模型API接口测试、批量推理验证、评测数据集自动化比对、反馈闭环验证等关键环节
3. 构建和维护AI测试数据集、评测基准及效果度量体系,协同算法团队开展模型迭代的质量评估与回归验证;
4. 参与AI产品需求与技术方案评审,识别AI特性相关质量风险(如上下文依赖异常、长程推理失效、多模态输入兼容性等),推动可测性设计落地;
5. 持续优化测试效能,推动AI测试能力嵌入CI/CD流程,实现模型版本、服务版本、前端应用的端到端质量门禁。
职位要求:
1. 本科及以上学历,计算机科学、人工智能、软件工程或相关专业,具备4年以上软件测试经验,其中至少2年聚焦AI/机器学习类产品的测试或测试开发实践;
2. 熟练掌握Python编程,熟悉主流测试框架(如Pytest、Behave)及HTTP/gRPC接口测试工具;具备构建轻量级自动化测试平台或插件的实际经验;
3. 了解常见AI技术栈,包括但不限于大语言模型(LLM)基础原理、Prompt Engineering、RAG架构、模型服务化(vLLM、Triton)及典型AI开发框架(Hugging Face、LangChain等),能理解模型输入输出逻辑并设计有效验证方法;
4. 具备Linux环境操作能力,熟悉Docker容器化部署及基本Shell/SQL脚本编写,能独立完成测试环境搭建与问题复现;
5. 具备良好的抽象建模能力与质量分析思维,能针对AI不确定性特征设计可量化、可重复、可追溯的测试方案。
1. 负责AI类产品(包括大模型应用、智能对话系统、AIGC工具等)的功能、性能、可靠性、数据质量及AI特有维度(如输出一致性、幻觉识别、提示词鲁棒性、偏见与公平性)的测试策略制定与执行;
2. 设计并开发面向AI场景的自动化测试框架与工具链,覆盖模型API接口测试、批量推理验证、评测数据集自动化比对、反馈闭环验证等关键环节
3. 构建和维护AI测试数据集、评测基准及效果度量体系,协同算法团队开展模型迭代的质量评估与回归验证;
4. 参与AI产品需求与技术方案评审,识别AI特性相关质量风险(如上下文依赖异常、长程推理失效、多模态输入兼容性等),推动可测性设计落地;
5. 持续优化测试效能,推动AI测试能力嵌入CI/CD流程,实现模型版本、服务版本、前端应用的端到端质量门禁。
职位要求:
1. 本科及以上学历,计算机科学、人工智能、软件工程或相关专业,具备4年以上软件测试经验,其中至少2年聚焦AI/机器学习类产品的测试或测试开发实践;
2. 熟练掌握Python编程,熟悉主流测试框架(如Pytest、Behave)及HTTP/gRPC接口测试工具;具备构建轻量级自动化测试平台或插件的实际经验;
3. 了解常见AI技术栈,包括但不限于大语言模型(LLM)基础原理、Prompt Engineering、RAG架构、模型服务化(vLLM、Triton)及典型AI开发框架(Hugging Face、LangChain等),能理解模型输入输出逻辑并设计有效验证方法;
4. 具备Linux环境操作能力,熟悉Docker容器化部署及基本Shell/SQL脚本编写,能独立完成测试环境搭建与问题复现;
5. 具备良好的抽象建模能力与质量分析思维,能针对AI不确定性特征设计可量化、可重复、可追溯的测试方案。
2026-08-31 11:05
IP属地:广东广州
职位福利
本科3-5年测试工作经验

上海试试管理咨询有限公司
未融资 · 10000人以上


鱼泡安全保障
如遇到办证收费、刷单、传销、诱导买车等违规行为,请立即向鱼泡直聘投诉举报投诉举报 >

附近适合您的职位
1-1.4万元/月
测试工程师3-5年本科功能测试自动化测试桌面测试JavaPythonShellPostmanSeleniumFiddlerMySQLWINDOWS和LINUXOracle
广州 海珠区
1-1.5万元/月
测试工程师3-5年大专自动化测试经验APPERP自动化测试性能测试MySQLFiddler功能测试掌握软件测试理论和流程JMeterPython
广州 海珠区







