GUI Agent AI自动化测试

课程 ID: 19340

描述:
话题概述: 随着移动端业务复杂度持续上升、迭代节奏加快,传统自动化测试面临三大瓶颈:用例编写门槛高、维护成本高、覆盖率上不去。我们需要一套面向 GUI 的“零代码”自动化方案,让测试人员用自然语言描述用例,由 AI 完成路径规划、视觉定位与结果断言,并形成“需求 → 用例 → 执行 → 归因”的端到端闭环。 演讲题纲: 话题亮点: 我们构建了一套以大模型视觉理解 + 多 Agent 协同为核心的智能自动化系统: -上下游分层设计:上游需求与用例生产层(PRD/代码 Diff 分析驱动)→ 下游 Agent 执行层(规划/执行/断言三 Agent ReAct 协同)→ 审核层(裁判模型 + 日志审计独立判定置信度); -跨平台统一引擎 :屏蔽 Android/iOS/鸿蒙/Windows/Mac/Web 六端差异,通过 MCP 标准化协议对接 AI Agent; -基础设施双底座:知识库(业务/导航/历史用例/经验)+ Skill 技能库(用例生成、报告生成的固定流程模板)共同支撑上下游; -归因闭环:失败用例自动归因(环境/Bug/用例/模型)→ 创建缺陷单 → 跟踪修复 → 回归验证; 关键技术攻关:视觉 grounding 精度优化、效率、VL Judge 二次审核可信度。