AGENTS
UI & Voice Intelligent Test
低代码、多模态的 UI 与语音自动化测试，具备 7×24 小时持续执行能力。
核心痛点
- UI 测试效率与维护成本问题：传统自动化测试脚本开发成本高、维护难，UI 变化或分辨率切换容易导致脚本失效。
- 语音场景复杂：语音测试需要覆盖唤醒、多轮对话、语义纠错、声纹识别和噪声模拟，人工验证成本高。
- 问题容易复发：效率低、成本高、维护难和问题复发共同成为质量交付瓶颈。
解决方案与技术实现路径
- 自然语言生成测试：使用自然语言编写自动化测试用例，无需手工开发脚本。
- 多模态 UI 识别与断言：组合识别图像、文本和图标，适应分辨率切换、多窗口布局等动态 UI。
- 语音测试与语义验证：支持中文、英文及方言的语音合成与识别，结合语音和日志，通过规则、语义相似度和 LLM 多重投票判定结果。
亮点
- 低代码测试编写：自然语言即可描述测试意图。
- 动态 UI 适应：不依赖单一像素位置，能够处理分辨率和窗口变化。
- 多模态断言：同时校验图像、文本和通信结果。
- 高鲁棒语音评估：通过多维度、多重投票提升判定稳健性。
商业价值
- 语音自动化测试覆盖率提升超过 80%，UI 自动化测试覆盖率提升约 40%—70%。
- 支持 7×24 小时执行；平均单次测试执行时间小于 2 分钟。
- PPT 标注 UI 测试资源占比可降低约 5%、语音测试资源占比可降低约 10%，回归效率提升 50% 以上。
- 统一的 UI 与 Voice 测试能力适合持续集成和量产项目回归。