职位概述
构建AI系统质量保障体系,覆盖传统功能测试与AI特性验证,确保智能应用可靠交付。
核心职责
1.设计AI应用测试策略(功能/安全/伦理)
2.开发Prompt稳定性、模型漂移检测方案
3.构建端到端测试流水线(CI/CD集成)
4.建立指标监控模型输出质量
5.AI测试自动化流水线的搭建
硬性要求
1.精通自动化测试框架(Pytest/Selenium)
2.掌握LLM测评工具(LangSmith/DeepEval)
3.掌握AI应用的可观察性
4.具备数据漂移/幻觉检测实战经验
5.熟悉Kubernetes监控栈(Prometheus/Grafana)
加分项
1.有模糊测试(Fuzzing)对抗Prompt攻击经验
2.了解模型可解释性(SHAP/LIME)工具