【ITニュース解説】Revolutionizing Test Automation with Vibium AI: Jason Huggins

システムエンジニアを目指す皆さんにとって、ソフトウェアの「テスト」は非常に重要な工程だ。作ったプログラムが正しく動くか、意図しない挙動をしないかを確認する作業で、このテストを自動化する技術は常に進化している。今回紹介するVibium AIは、テスト自動化の世界に大きな変革をもたらそうとしている新しいシステムだ。

まず、テスト自動化ツールの代表格であるSeleniumについて触れておこう。「Seleniumはもう古いツールではないか？」と考える人もいるかもしれない。しかし、その答えは「ノー」だ。Seleniumは、ウェブブラウザを自動で操作するための土台として、今もなお多くの新しい自動化ツールで利用されている。時代遅れだというイメージは、その長い歴史からくる誤解が多く、実際にはWebDriver BiDirectional（WebDriver Bidi）という新しいプロトコルを取り入れるなど、技術的な進化を続けている。多くの人が「新しい」と感じるツールの裏側でも、Seleniumの技術がさまざまな形で活用されているのである。Vibium AIもまた、この進化を続けるSeleniumの技術を基盤の一部として利用している。

Vibium AIが目指すのは、「ハンドル付きの自動運転車」のように、人間の制御を完全に手放すことなく、テスト作業の大部分をAIが自動でこなしてくれるシステムだ。つまり、テスト作業における反復的で間違いやすい部分をAIに任せることで、人間の専門知識や判断力を活かし、より高度で創造的な仕事に集中できるようになるという考え方である。開発者は、Vibium AIのシステム上で伝統的なテストコードを書くこともできるが、このシステムは、テストの作成、実行、問題の特定と対応、さらには実際のアプリケーション利用状況からテストの範囲を広げるといった、多くの重労働をAIが肩代わりすることを目指している。

Vibium AIの核となる仕組みは、「アプリケーションマップ」の作成と「モデルベースドテスト」という考え方だ。まず、アプリケーションがどのように使われているかを知るために、実際のユーザー操作（例えば、ページへのアクセス、ボタンのクリック、フォームの送信、ズーム操作など）をイベントとして記録する。これらのイベント情報を集めて整理することで、アプリケーションの各画面や状態がどのように繋がり、ユーザーがどのような流れで操作するのかを示す「地図」（モデル）を作り上げる。この「地図」を基に、AI（大規模言語モデル）が「ユーザーが商品を問題なく購入できるか」といった、複雑なワークフローを理解し、その流れに沿ったテストを自動で生成するのだ。これにより、手作業でテストシナリオを考える手間が大幅に削減され、より実際の使い方に近い、質の高いテストが可能になる。これまでのモデルベースドテストは、この「地図」を作るのが大変だったが、AIの力を使うことでその障壁が大きく下がる。

Vibium AIは、これまでのテストツールでは難しかったような、複雑なユーザーインターフェース（UI）のテストにも対応できる。例えば、3Dグラフィックを使ったウェブサイトや、特殊なインタラクションを持つUIなどだ。記事では、3Dチェスのデモを例に、Vibium AIがテストを行うには、アプリケーション側が「ユーザーがX地点にズームした」「駒がA3からB4に移動した」といった、意味のあるイベントを正確に外部に伝える必要があると説明している。このようなイベント情報があれば、AIはUIの種類に関わらず、ユーザーの操作の流れを理解し、適切なテストを生成できるようになるのだ。

開発者がVibium AIを日常の開発プロセスに組み込む方法も考慮されている。アプリケーションにイベント情報を組み込むためのJavaScriptライブラリを直接追加する方法や、コードの変更なしで利用できるブラウザ拡張機能を使う方法が考えられている。一度設定してしまえば、開発者がコードを変更した際に、Vibium AIはその変更がアプリケーションマップのどの部分に影響するかを特定し、関連するテストだけを迅速に実行する。これにより、テストの実行時間を大幅に短縮し、開発者は自分の変更がシステム全体に与える影響をすぐに把握できるため、開発の効率が向上する。

テスト結果の「不安定さ」（flakiness）への対応も、Vibium AIの重要な特徴だ。従来のテストでは、テストが「合格」か「失敗」かの二択で判断されることが多かった。しかし、実際には、一時的な広告ポップアップをAIが自動で閉じたためテストが続行できた、ボタンの色が変わったがAIが別の方法で操作を完了できた、といった「本当は問題があったが、何とか通過できた」というケースが存在する。Vibium AIは、このような状況を「オレンジ」という第三のステータスとして明確に区別し、人間が確認すべき状況として提示する。これにより、見かけ上の「合格」に騙されたり、些細な問題で「失敗」と判断してパニックになったりすることなく、エンジニアリングチームは本当に重要な問題に集中できるようになる。

Vibium AIは、ウェブブラウザを自動化する技術の中でも特に「テスト自動化」に焦点を当てている。ブラウザ自動化には、事務作業の自動化やウェブサイトからのデータ収集など、様々な用途があるが、Vibium AIはテストの自動化に特化することで、アプリケーションの動作をモデル化し、テストの不安定さを最小限に抑え、開発サイクルに密接に統合するといった、テスト固有の要求に最適化された解決策を提供することを目指している。

Vibium AIは、視覚的なユーザーインターフェースにも力を入れている。Googleマップのように、アプリケーションのマップを拡大・縮小して、ユーザーのよく通る経路や、自動テストでカバーされている範囲などを直感的に確認できるような仕組みが構想されている。また、自動テストがブラウザ上で実行されている様子をリアルタイムで表示する「ライブカメラ」のような機能も提案されており、テストがどのように行われているかをより分かりやすく、関係者にも説明しやすくなるだろう。

Vibium AIのようなAIによるテスト自動化が進むと、「QAエンジニアの仕事がなくなるのではないか」という懸念を持つ人もいるかもしれない。しかし、Vibium AIの開発者は、仕事が完全になくなることはなく、その役割が大きく変化すると考えている。手動でのテスト実行といった反復的な作業はAIに任せ、人間はテストの計画、期待値の定義、AIが特定した「オレンジ」状態の結果の分析、そしてAIが苦手とするような複雑なシナリオや境界条件のテスト設計といった、より高度な仕事へとシフトしていく。将来的には、テスト用のモデルを構築する「モデルエンジニア」や、アプリケーションからイベント情報を適切に出力させるための「テレメトリーエンジニア」といった新しい職種も生まれる可能性がある。

システムエンジニアを目指す皆さんへの実践的なアドバイスとして、Vibium AIの開発者は、AIを使ってコードを生成する「vibe-coding」のようなツールを実際に試してみることを勧めている。自分で小さなアプリケーションを作り、AIにコードを生成させ、どこまで自動で進められるか、どこで人間の手が必要になるかを体験することで、AI活用の本当の可能性と課題を肌で感じることができる。

Vibium AIは、単なるテストスクリプトではなく、アプリケーションの使われ方を反映した「生きている地図」としてテストを捉え直そうとする、意欲的な試みだ。アプリケーションが意味のあるイベントを送り出すように設計し、それらを統合してアプリケーションの動作モデルを構築し、そのモデルからAIが賢く、頑強なテストを生成する。そして、AIによる開発と人間のレビューが安全かつ効率的に行われるよう、テストを開発サイクルに深く組み込む。これらはVibium AIの明確で実用的な柱となる考え方である。

テスト自動化の現場は一夜にして変わるものではないが、Vibium AIは、自動化されたシステムと人間の専門知識がより豊かで、理解しやすい形で協力し合う未来を示している。伝統的なテストエンジニアであれ、AIを使った開発に興味を持つエンジニアであれ、このアプローチは、AIを活用したエンジニアリングの時代を乗りこなすための具体的なツールと新しい考え方を提供してくれるだろう。