モバイルゲーム事業における 内製デバイスファームの開発/運用事例

モバイルゲーム事業では、QA規模の肥大化による端末検証の効率化が必要となっております。
そこで、組織全体でモバイルゲームの検証に使える内製のデバイスファームを開発し運用することにしました。

そのデバイスファームの構成や技術、運用事例について紹介します。

1. モバイルゲーム事業における 内製デバイスファームの開発/運用事例 株式会社サイバーエージェント 2024.08.29 住田 直樹
2. 自己紹介 住田直樹 / X:@udon_qu 株式会社サイバーエージェント/株式会社QualiArts SGEコア技術本部(コアテク) QAチーム • SGEコア技術本部 : QAチーム • QualiArts : Unityリードエンジニア • QualiArts : 技術広報
3. 組織について ゲーム・エンターテイメント事業部は 株式会社Cygames以外の子会社で構成されており その子会社群を総称してSGEと呼んでいます。 コア技術本部は「開発効率と品質の向上」を ミッションに、各社を横断した役割を担っています。 (コア技術本部を略称でコアテクと呼んでいます) ゲーム・エンターテイメント事業部（SGE） SGE 各子会社 基盤開発室 開発推進室 基盤の提供 プロジェクトに 特化したサポート
4. • モバイルゲームの開発で発生するQA課題 • 内製デバイスファームの構築 • 内製デバイスファームの工夫点 • 内製デバイスファームの運用と実績 • まとめ アジェンダ
5. モバイルゲームの開発で発生するQA課題 モバイルゲーム事業における内製デバイスファームの開発/運用事例
6. モバイルゲーム開発事情 クオリティ 多機能 プラット フォーム グローバル化
7. クオリティ 多機能 プラット フォーム グローバル化 モバイルゲーム開発事情 QA工程の大幅なコスト増大 QA工程の複雑化 QA工程の増加
8. • 柔軟な端末確保の難しさ ◦ 特定のスペックの端末や、複数台の端末を要する際に手配が面倒 ▪ 会社ごとに端末管理をしており、それぞれで対応 • リモートワークへの適用 ◦ リモートワークでの実機確保が面倒 ▪ 出社とのハイブリットのため、端末をオフィスに置いてきていたり、その逆のケースも ▪ 特定のOSやスペックの端末はリモート環境での突発の確保が困難 実機検証の端末管理の課題感 検証における実機環境の確保の煩雑さ デバイスファームの導入検討へ
9. 内製デバイスファームの構築 モバイルゲーム事業における内製デバイスファームの開発/運用事例
10. デバイスファームの導入 社内で求められるデバイスファームの要件 バリエーション セキュリティ
11. クラウドサービスのデバイスファーム • 導入が容易 • スケール可能 • 保守運用が不要 ◦ 内製はここがネック • カスタマイズ ◦ 端末の更新 ◦ ネットワーク環境 • 費用面 ◦ カスタマイズに依存 規模感や要件を考えて 小規模な内製デバイスファームからスタート
12. リモートでの実機検証環境「SGE Test Farm」
13. 開発スケジュール 2021/08 開発開始 2022/04 本番環境 稼働 2022/02 開発完了
14. システムの全体構成 端末制御 サーバー USB 2.0 Type-C 20ポートハブ OpenSTF サーバー ︙ ルーター 専用WiFi AP 回線冗長化 USB 2.0 Type-C 20ポートハブ ︙ オフィスのIPと 会社VPNのみ許可
15. システムの全体構成
16. 端末制御 OpenSTFを活用したリモート操作可能な実機環境の整備 • Android端末をブラウザ上でリモート操作可能なシステム ◦ https://github.com/openstf/stf • ブラウザ経由で接続されている端末をGUIで操作可能 ◦ 端末の貸出による他ユーザーからのロックなど排他制御を実現 ◦ スクリプトから端末を確保するといった操作も可能
17. システムのDockerコンテナ化 開発環境 端末制御 API Web 本番環境 端末制御 API Web
18. USBハブ 同時接続数と給電能力を重視して選定 • USB-2THCS20 : サンワサプライ ◦ 20ポート2A給電 ◦ USB2.0 ◦ Type-C ◦ 2台をデイジーチェーン運用 ◦ 現在は販売していない
19. ネットワーク ネットワークについてのセキュリティ • 専用のネットワークを構築（業務用ネットワークと分離） ◦ 端末には専用のIPが割り当てられるので、プロジェクト側で許可（VPNの代替） • サイバーエージェント内製の認証基盤でユーザー認証 ◦ 別の部署の社員が使えないように
20. 内製デバイスファームの工夫点 モバイルゲーム事業における内製デバイスファームの開発/運用事例
21. • 安定する端末を20台程度常設 ◦ 端末での単純な検証が滞りなく実行できることを担保 • モバイルゲームに特化した端末のバリエーション ◦ GPU、解像度、OSなどの環境差分をカバー • 会社やプロジェクト単位での専用端末も用意可能 ◦ スポットで特定の条件の端末を提供するパターン 端末のラインナップ 通常の実機検証 GPU検証 最新OS検証 プロジェクトAの調査用
22. OpenSTFのカスタマイズ OpenSTFをフォークし、必要な機能を拡充 GUI セキュリティ
23. OpenSTFのカスタマイズ OpenSTFをフォークし、必要な機能を拡充 GUI セキュリティ
24. 端末情報の拡充 モバイルゲームの開発に必要な情報の拡充 • GPU情報の表示 • 不要な情報の非表示 • 端末のカテゴライズ
25. OpenSTFのカスタマイズ OpenSTFをフォークし、必要な機能を拡充 GUI セキュリティ
26. セキュリティ 端末上の情報についてのセキュリティ • 他人が利用している端末は閲覧不可能 ◦ OpenSTFの標準機能で解決 ◦ ラック内に端末は置いてあるので、覗き見なども不可能 • 利用を終えたら自動的にインストールされたアプリなどを削除 ◦ IPに関わるプロジェクトが使えるよう機密性を担保 ◦ 確実にアプリを削除するよう調整
27. • 月1での定期端末チェック ◦ ラック内を確認して膨張や変形している端末がないか確認 • USB給電の動的制御の検討中 ◦ 利用しているUSBハブの兼ね合いでやり方を検討中 端末管理 端末のバッテリー負荷に対するケア
28. 組織内での利用推進 社内のユーザーの操作のガイドや質問・要望の対応 • 基本的な使い方のドキュメントを配備 ◦ 端末を利用開始から終了、アプリケーションをインストールするといった基本動作 • Slackチャンネルにて質問や要望、バグ報告を受付 ◦ 一時的なメンテナンスなどもチャンネルにて通知
29. 内製デバイスファームの実績 モバイルゲーム事業における内製デバイスファームの開発/運用事例
30. エンジニアでの利用実績 • 実機依存の機能検証 ◦ プラグインの更新に伴う起動確認などにも有効 • 特定の端末に発生する不具合の調査 ◦ 一部の機種や、古い機種じゃないと発生しないような問題に有効 ◦ 描画周りのパフォーマンス検証などにも有効 • 手元に端末がない場合の検証 ◦ リモートワークで手元にない場合の実機検証
31. QAでの利用実績 • QAの端末検証での活用 ◦ 端末ごとの動作検証 ◦ 複数のユーザーを必要とする機能検証 ▪ ユーザー同士でのグループ機能や、フレンド機能などの多人数で検証すべき機能に有効 ◦ エージングテスト ▪ 長時間端末を確保して放置し、手作業を止めることなく実行可能 • テストの自動化 ◦ Airtestなどの自動化システムの実行環境
32. 内製デバイスファームを運用してみて • 柔軟な端末調整 • セキュリティに都合◦ • 費用面の抑制 • 保守が大変 ◦ 自前実装の運用 ◦ インフラの保守 ◦ 端末保守 ◦ 保守人員 ◦ OS更新対応
33. まとめ モバイルゲーム事業における内製デバイスファームの開発/運用事例
34. まとめ • モバイルゲームのQA効率化にデバイスファームを内製 ◦ クラウドサービスも検討したが、ユースケースを検討して内製からスタート • 開発環境に最適化されたシステム構成を実現 ◦ 端末はモバイルゲームに特化したラインナップ ◦ ユースケースに沿ったカスタマイズ • 内製は柔軟性が高いが保守がボトルネック ◦ オンプレミス型のデバイスファームのサービスも検討中
35. ご清聴ありがとうございました