Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
令和トラベルQAのAI活用
Search
ao
May 27, 2025
Technology
0
850
令和トラベルQAのAI活用
5/27に開催したNEWT Tech Talk「令和トラベル流 急成長を支えるAI × プロダクト開発の最前線」のQAでの事例を紹介した資料です。
ao
May 27, 2025
Tweet
Share
More Decks by ao
See All by ao
テスト会社と事業会社のQAをやってみての振り返りとこれから
seigaitakahiro
0
130
Other Decks in Technology
See All in Technology
Recoil脱却の現状と挑戦
kirik
3
460
Microsoft Learn MCP/Fabric データエージェント/Fabric MCP/Copilot Studio-簡単・便利なAIエージェント作ってみた -"Building Simple and Powerful AI Agents with Microsoft Learn MCP, Fabric Data Agent, Fabric MCP, and Copilot Studio"-
reireireijinjin6
1
150
AI工学特論: MLOps・継続的評価
asei
10
2k
AI人生苦節10年で会得したAIがやること_人間がやること.pdf
shibuiwilliam
1
210
ML Pipelineの開発と運用を OpenTelemetryで繋ぐ @ OpenTelemetry Meetup 2025-07
getty708
0
320
Expertise as a Service via MCP
yodakeisuke
1
160
With Devin -AIの自律とメンバーの自立
kotanin0
2
790
MCPに潜むセキュリティリスクを考えてみる
milix_m
1
880
増え続ける脆弱性に立ち向かう: 事前対策と優先度づけによる 持続可能な脆弱性管理 / Confronting the Rise of Vulnerabilities: Sustainable Management Through Proactive Measures and Prioritization
nttcom
1
210
なぜAI時代に 「イベント」を中心に考えるのか? / Why focus on "events" in the age of AI?
ytake
2
800
AI駆動開発 with MixLeap Study【大阪支部 #3】
lycorptech_jp
PRO
0
270
激動の時代、新卒エンジニアはAIツールにどう向き合うか。 [LayerX Bet AI Day Countdown LT Day1 ツールの選択]
tak848
0
610
Featured
See All Featured
Unsuck your backbone
ammeep
671
58k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.4k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
10
1k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
47
9.6k
The MySQL Ecosystem @ GitHub 2015
samlambert
251
13k
Imperfection Machines: The Place of Print at Facebook
scottboms
267
13k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
8
850
How To Stay Up To Date on Web Technology
chriscoyier
790
250k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
21
1.4k
Gamification - CAS2011
davidbonilla
81
5.4k
Practical Orchestrator
shlominoach
189
11k
Keith and Marios Guide to Fast Websites
keithpitt
411
22k
Transcript
QAでの取り組み 令和トラベル流 急成⻑を⽀えるAI × プロダクト開発の最前線 2025.5.27 QAエンジニア ⻘海貴⼤
© 2024 Reiwa Travel, Inc. ⾃⼰紹介 2 Background • 経歴
◦ コンサル会社 ◦ バルテス 株式会社 ◦ atama plus 株式会社 ◦ 株式会社 令和トラベル • NEWT全般のQAをやっています Seigai Takahiro ⻘海 貴⼤
AGENDA © 2024 Reiwa Travel, Inc. 3 1. AIを活⽤するための⼟台づくり 2.
令和トラベルQAエンジニアのAI活⽤ 3. これから挑戦したいこと
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり ①プロダクト機能への活用 5 ①QA業務の⾒直しと運⽤変更 ②QAチームがAIを活⽤する⽂化づくり
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり そもそもなぜ業務の⾒直しから始めるのか。 • AI活⽤へ集中投下するための準備 ◦
組織体制変更により最適化されてない業務の⾒直し ◦ AI活⽤を前提とした運⽤に変更 • 不必要な業務のAI代替防⽌ ◦ 最も効果が⾼いのは無くす、減らすなどのプロセス変更 QA業務の⾒直しと運⽤変更 6
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり QA業務の⾒直しと運⽤変更でやったこと 業務の可視化 • 各業務の⽬的や⼿順を明確化。プロセス変更
or AI活⽤すべき箇所の特定 ⾒直しと運⽤変更の3step • 無くす:形骸化した、無くなっても困らないものは削除 • 減らす:残す業務プロセスのシンプル化、効率化による削減 • 洗練する:AIで代替 or AIを活⽤しやすいように業務を最適化 QA業務の⾒直しと運⽤変更 7
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり 事例:洗練する テストケースのフォーマット変更 • AIが扱いやすく、精度⾼く出⼒される形式にテストケースの項⽬を変更 8
Before After
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり AIを活⽤したQA業務の効率化をQA全員KPIとして持つ • KPIにすることでAI活⽤を⾃分ごと化 週次のQA定例でAIトレンドや取り組んだことの共有
• 全員で最新情報のキャッチアップ。各⾃取り組んだことの取り⼊れ もくもく会の開催 • ⽬的 ◦ AIの技術調査や試す時間を強制的につくる • 内容 ◦ 各⾃気になったテーマを1時間試す。雑談&相談OK ◦ 参加の敷居をできるだけ低く設計 QAチームがAIを活⽤する⽂化づくり 9
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり 成果 QA業務の⾒直しと運⽤変更 • QA業務を変更前から30-40%削減
• 設計 / レビュー / 実施も⼤幅に削減。インシデントの発⽣は無し QAチームがAIを活⽤する⽂化づくり • AIを使うことが “当たり前” ⽂化の醸成 10
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 12 要件定義〜リリースまでのQA業務 要件定義 開発
QA リリース 仕様検討 要件把握 影響範囲の調査 テストの設計 機能テストの実施 E2Eテスト リグレッションテスト 不具合分析
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 13 要件定義〜リリースまでのQA業務 ⾚字がAIを活⽤中の箇所 要件定義
開発 QA リリース 仕様検討 要件把握 影響範囲の調査 テストの設計 機能テストの実施 E2Eテスト リグレッションテスト 不具合分析
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 14 Devin • PRから変更内容と影響範囲の特定
効果 • ⾮エンジニアでもコードを読まずに変更内 容などがわかるようになった 影響範囲の調査
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 15 Devin / Cursor
• PR変更内容 or masterブランチの差分から テスト観点の洗い出し → テストケース への⽣成 効果 • 汎⽤的な観点が多い。50-60点の精度だが 0→1で作成するよりテスト設計の⼯数を削 減できている • 想定してなかった影響範囲や観点を提案し てくれることも稀にある テスト観点の整理
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ Dify ‧誤字脱字や表記揺れなどを確認するチェッカーを作成。 効果 ‧誤字脱字のチェック⼯数は削減。記事などの⽂章確認にも流⽤。
課題 ‧表記揺れなどの確認には課題。誤字脱字確認のみ利⽤。 ‧画像からの差分チェックできないかチャレンジ中。 16 ⽂⾔確認(機能テスト)
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 17 チャレンジ中:LLMによるテスト実⾏(機能テスト) Playwright MCP
• デザイン、機能概要とシナリオをLLMに渡してシナリオ⽣成。LLMが作成したシナリオから⾃動で テスト実⾏ 課題 • 1度で動くこともあるが、何度か修正が必要。 • 期待値と異なるのにOKにしたり、違う操作をすることもあるので実⾏結果の監視、メンテが必要。
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 18 ⾃動化はエンジニアと似た内容なので割愛します!
© 2024 Reiwa Travel, Inc. これから挑戦したいこと
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ これから挑戦したいこと • E2E⾃動化の安定化 ◦
Devin / Cursor / Clineを活⽤し、テストコードの⽣成‧保守までを安定化 • 仕様理解〜テスト実⾏のほとんどをAIに代替 ◦ Figma、NotionのPRDからLLMでテストシナリオ作成 ◦ 作成したテストシナリオから ▪ Playwright MCPなどでテスト実⾏ ▪ Devin / Clineでテストコード作成 • AI駆動を進めるためのドキュメント整備 ◦ AIが扱いやすい形にテストシナリオ、観点などを体系的に整備 20