AGENTS
UI & Voice Intelligent Test エージェント
ローコード・マルチモーダル UI および音声自動テスト。24/7 連続実行能力を備えます。
中核的な課題
- UI テストの効率と保守コストの問題：従来の自動化テストスクリプトは開発コストが高く保守が難しいです。UI の変更や解像度切り替えでスクリプトが無効になりやすいです。
- 音声シーンが複雑：音声テストではウェイクアップ、マルチターン対話、意味修正、声紋認識、ノイズシミュレーションをカバーする必要があり、人手による検証コストが高いです。
- 問題が再発しやすい：効率の低さ、コストの高さ、保守の難しさ、問題の再発が共に品質交付のボトルネックとなっています。
ソリューションと技術実装パス
- 自然言語によるテスト生成：自然言語で自動化テストケースを記述し、スクリプトを人手で開発する必要がありません。
- マルチモーダル UI 認識とアサーション：画像、テキスト、アイコンを組み合わせて認識し、解像度切り替え、マルチウィンドウレイアウトなどの動的 UI に適応します。
- 音声テストと意味検証：中国語、英語、方言の音声合成と認識をサポートし、音声とログを組み合わせ、ルール、意味的類似度、LLM による多重投票で結果を判定します。
特長
- ローコードでのテスト記述：自然言語でテスト意図を記述できます。
- 動的 UI 適応：単一のピクセル位置に依存せず、解像度とウィンドウ変化に対応できます。
- マルチモーダルアサーション：画像、テキスト、通信結果を同時に検証します。
- ロバストな音声評価：多次元・多重投票により判定の堅牢性を高めます。
商業的価値
- 音声自動化テストのカバレッジは 80% 以上向上、UI 自動化テストのカバレッジは約 40%—70% 向上。
- 24 時間実行をサポート；1 回あたりの平均テスト実行時間は 2 分未満です。
- PPT 試算：UI テストのリソース占比を約 5%、音声テストのリソース占比を約 10% 低減でき、回帰効率は 50% 以上向上します。
- 統一された UI と Voice テスト能力は継続的インテグレーションと量産プロジェクトの回帰に適しています。