01.AI

测试开发工程师(AI Agent)

01.AI  •  Onsite  •  3 hours ago
Apply
AI can make mistakes so check important info. Chat history is never stored.

Job Description

测试开发工程师(AI Agent)
北京
全职
研发 - 测试
职位描述
* 负责企业级 AI Agent 产品的功能测试、自动化测试及质量保障,参与产品全生命周期测试工作;
* 搭建和维护 Web UI 自动化测试框架,编写自动化测试脚本,持续提升自动化测试覆盖率和稳定性;
* 建设 Agent 自动评测体系,设计评测数据集、评测用例及评测指标,持续评估模型、 Agent 效果,支持版本效果对比与质量分析;
* 负责 API、Web 及 Agent 服务的性能测试,分析系统瓶颈并推动性能优化;
* 参与测试平台、评测平台及相关测试工具的开发与维护,推动自动化测试、评测体系与 CI/CD 流程集成;
* 熟练运用 Cursor、Claude Code 等 AI 开发工具提升测试研发效率,包括自动生成测试代码、测试数据、测试计划及缺陷分析报告,利用 AI 辅助日志分析、链路溯源、根因定位、失败复现以及 LLM-as-Judge 评测规则构建,持续推动测试智能化;
* 负责测试体系建设及团队管理,制定测试规范和质量标准,推动团队技术成长与工程效能提升,保障测试工作的高质量交付。
职位要求
* 本科及以上学历,计算机相关专业,5 年及以上测试开发经验;
* 熟练掌握 Python,具备扎实的测试开发能力,具有 Flask 或 Django Web 开发经验,能够独立开发测试平台、评测平台或测试工具;
* 具有 AI Agent 或大模型应用测试经验,熟悉 Agent Workflow、Prompt、Tool Calling、Function Calling、RAG 等常见技术及测试方法;
* 熟悉 Playwright、Selenium 等至少一种 Web UI 自动化测试框架,具备 Web 自动化测试实践经验;
* 熟悉 HTTP、REST API、WebSocket、SSE 等协议,具备接口测试能力;
* 具备性能测试经验,熟悉 JMeter、Locust、k6 等至少一种性能测试工具;
* 熟悉 Git、Linux 常用命令及 CI/CD 流程,具备良好的工程化能力;
* 具备优秀的问题分析能力、代码能力、沟通协作能力及团队管理能力,能够推动质量体系持续改进。
加分项
* 有 AI Agent 自动评测体系建设经验,熟悉 LLM-as-Judge、OpenAI Evals、DeepEval、Langfuse 等评测工具或平台;
* 有企业级 To B SaaS 产品测试经验;
* 有大型自动化测试框架、测试平台或质量平台建设经验。
投递
01.AI

About 01.AI

01.AI has launched Yi Open-source models on Hugging Face, GitHub, ModelScope. Stay tuned for more of our LLMs and application launches coming up!

https://huggingface.co/01-ai

https://github.com/01-ai/Yi

https://www.modelscope.cn/organization/01ai

Industry
IT & Software
Company Size
51-200 employees
Headquarters
Unknown
Year Founded
Unknown
Website
01.ai
Social Media