モバイル端末(スマートフォン/タブレット)向けのゲームは定期的にゲーム内容を更新し続けているため、サービス提供中はE2Eテストを含む各種テストを継続的に実行することが望ましいです。
またモバイル端末はハードウェアもOSバージョンも様々な端末が市場にあふれ、それら差異を含め実機上でのみ発生する問題を考慮すると実機上でテストを行うことが望ましいです。
これら2つの要件を満たすために、バンダイナムコスタジオではモバイル端末の基本的な操作を自動的に行うシステムを構築し、複数の実機端末で並行してE2Eテストを継続実行できる環境を運用しています。
このようなE2Eテストは1回のテストに10分以上も時間がかかる長編のテストとなるため、そのテストケースも長いスクリプトとなり記述することや保守することは難しくなります。一方でソフトウェアやハードウェアの問題だけでなくネットワークなど環境要因でテストが失敗することがあります。そのため私たちは長いテストスクリプトをわかりやすく記述できるテストフレームワークを導入して、さらにテスト結果を直感的に理解できるように動画による可視化を進めています。
本セッションでは、同様の長編テストの自動化に取り組む方々へ参考となるように、私たちが行ったテスト過程の動画化について、経緯と遭遇した課題に対する解決方法を解説します。