Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
令和トラベルQAのAI活用
Search
ao
May 27, 2025
Technology
0
810
令和トラベルQAのAI活用
5/27に開催したNEWT Tech Talk「令和トラベル流 急成長を支えるAI × プロダクト開発の最前線」のQAでの事例を紹介した資料です。
ao
May 27, 2025
Tweet
Share
More Decks by ao
See All by ao
テスト会社と事業会社のQAをやってみての振り返りとこれから
seigaitakahiro
0
130
Other Decks in Technology
See All in Technology
〜『世界中の家族のこころのインフラ』を目指して”次の10年”へ〜 SREが導いたグローバルサービスの信頼性向上戦略とその舞台裏 / Towards the Next Decade: Enhancing Global Service Reliability
kohbis
3
1.1k
「クラウドコスト絶対削減」を支える技術—FinOpsを超えた徹底的なクラウドコスト削減の実践論
delta_tech
4
190
United Airlines Customer Service– Call 1-833-341-3142 Now!
airhelp
0
180
ポストコロナ時代の SaaS におけるコスト削減の意義
izzii
1
330
Delta airlines®️ USA Contact Numbers: Complete 2025 Support Guide
airtravelguide
0
360
SRE不在の開発チームが障害対応と 向き合った100日間 / 100 days dealing with issues without SREs
shin1988
2
1.5k
[SRE NEXT] ARR150億円_エンジニア140名_27チーム_17プロダクトから始めるSLO.pdf
satos
5
2.3k
関数型プログラミングで 「脳がバグる」を乗り越える
manabeai
2
220
SREの次のキャリアの道しるべ 〜SREがマネジメントレイヤーに挑戦して、 気づいたこととTips〜
coconala_engineer
1
2.2k
Reach American Airlines®️ Instantly: 19 Calling Methods for Fast Support in the USA
flyamerican
1
180
推し書籍📚 / Books and a QA Engineer
ak1210
0
120
cdk initで生成されるあのファイル達は何なのか/cdk-init-generated-files
tomoki10
1
580
Featured
See All Featured
Documentation Writing (for coders)
carmenintech
72
4.9k
Art, The Web, and Tiny UX
lynnandtonic
299
21k
Balancing Empowerment & Direction
lara
1
440
Designing Dashboards & Data Visualisations in Web Apps
destraynor
231
53k
RailsConf 2023
tenderlove
30
1.1k
VelocityConf: Rendering Performance Case Studies
addyosmani
332
24k
Automating Front-end Workflow
addyosmani
1370
200k
Being A Developer After 40
akosma
90
590k
How to Ace a Technical Interview
jacobian
278
23k
Typedesign – Prime Four
hannesfritz
42
2.7k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
47
9.6k
GitHub's CSS Performance
jonrohan
1031
460k
Transcript
QAでの取り組み 令和トラベル流 急成⻑を⽀えるAI × プロダクト開発の最前線 2025.5.27 QAエンジニア ⻘海貴⼤
© 2024 Reiwa Travel, Inc. ⾃⼰紹介 2 Background • 経歴
◦ コンサル会社 ◦ バルテス 株式会社 ◦ atama plus 株式会社 ◦ 株式会社 令和トラベル • NEWT全般のQAをやっています Seigai Takahiro ⻘海 貴⼤
AGENDA © 2024 Reiwa Travel, Inc. 3 1. AIを活⽤するための⼟台づくり 2.
令和トラベルQAエンジニアのAI活⽤ 3. これから挑戦したいこと
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり ①プロダクト機能への活用 5 ①QA業務の⾒直しと運⽤変更 ②QAチームがAIを活⽤する⽂化づくり
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり そもそもなぜ業務の⾒直しから始めるのか。 • AI活⽤へ集中投下するための準備 ◦
組織体制変更により最適化されてない業務の⾒直し ◦ AI活⽤を前提とした運⽤に変更 • 不必要な業務のAI代替防⽌ ◦ 最も効果が⾼いのは無くす、減らすなどのプロセス変更 QA業務の⾒直しと運⽤変更 6
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり QA業務の⾒直しと運⽤変更でやったこと 業務の可視化 • 各業務の⽬的や⼿順を明確化。プロセス変更
or AI活⽤すべき箇所の特定 ⾒直しと運⽤変更の3step • 無くす:形骸化した、無くなっても困らないものは削除 • 減らす:残す業務プロセスのシンプル化、効率化による削減 • 洗練する:AIで代替 or AIを活⽤しやすいように業務を最適化 QA業務の⾒直しと運⽤変更 7
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり 事例:洗練する テストケースのフォーマット変更 • AIが扱いやすく、精度⾼く出⼒される形式にテストケースの項⽬を変更 8
Before After
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり AIを活⽤したQA業務の効率化をQA全員KPIとして持つ • KPIにすることでAI活⽤を⾃分ごと化 週次のQA定例でAIトレンドや取り組んだことの共有
• 全員で最新情報のキャッチアップ。各⾃取り組んだことの取り⼊れ もくもく会の開催 • ⽬的 ◦ AIの技術調査や試す時間を強制的につくる • 内容 ◦ 各⾃気になったテーマを1時間試す。雑談&相談OK ◦ 参加の敷居をできるだけ低く設計 QAチームがAIを活⽤する⽂化づくり 9
© 2024 Reiwa Travel, Inc. AIを活⽤するための⼟台づくり 成果 QA業務の⾒直しと運⽤変更 • QA業務を変更前から30-40%削減
• 設計 / レビュー / 実施も⼤幅に削減。インシデントの発⽣は無し QAチームがAIを活⽤する⽂化づくり • AIを使うことが “当たり前” ⽂化の醸成 10
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 12 要件定義〜リリースまでのQA業務 要件定義 開発
QA リリース 仕様検討 要件把握 影響範囲の調査 テストの設計 機能テストの実施 E2Eテスト リグレッションテスト 不具合分析
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 13 要件定義〜リリースまでのQA業務 ⾚字がAIを活⽤中の箇所 要件定義
開発 QA リリース 仕様検討 要件把握 影響範囲の調査 テストの設計 機能テストの実施 E2Eテスト リグレッションテスト 不具合分析
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 14 Devin • PRから変更内容と影響範囲の特定
効果 • ⾮エンジニアでもコードを読まずに変更内 容などがわかるようになった 影響範囲の調査
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 15 Devin / Cursor
• PR変更内容 or masterブランチの差分から テスト観点の洗い出し → テストケース への⽣成 効果 • 汎⽤的な観点が多い。50-60点の精度だが 0→1で作成するよりテスト設計の⼯数を削 減できている • 想定してなかった影響範囲や観点を提案し てくれることも稀にある テスト観点の整理
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ Dify ‧誤字脱字や表記揺れなどを確認するチェッカーを作成。 効果 ‧誤字脱字のチェック⼯数は削減。記事などの⽂章確認にも流⽤。
課題 ‧表記揺れなどの確認には課題。誤字脱字確認のみ利⽤。 ‧画像からの差分チェックできないかチャレンジ中。 16 ⽂⾔確認(機能テスト)
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 17 チャレンジ中:LLMによるテスト実⾏(機能テスト) Playwright MCP
• デザイン、機能概要とシナリオをLLMに渡してシナリオ⽣成。LLMが作成したシナリオから⾃動で テスト実⾏ 課題 • 1度で動くこともあるが、何度か修正が必要。 • 期待値と異なるのにOKにしたり、違う操作をすることもあるので実⾏結果の監視、メンテが必要。
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ 18 ⾃動化はエンジニアと似た内容なので割愛します!
© 2024 Reiwa Travel, Inc. これから挑戦したいこと
© 2024 Reiwa Travel, Inc. 令和トラベルQAエンジニアのAI活⽤ これから挑戦したいこと • E2E⾃動化の安定化 ◦
Devin / Cursor / Clineを活⽤し、テストコードの⽣成‧保守までを安定化 • 仕様理解〜テスト実⾏のほとんどをAIに代替 ◦ Figma、NotionのPRDからLLMでテストシナリオ作成 ◦ 作成したテストシナリオから ▪ Playwright MCPなどでテスト実⾏ ▪ Devin / Clineでテストコード作成 • AI駆動を進めるためのドキュメント整備 ◦ AIが扱いやすい形にテストシナリオ、観点などを体系的に整備 20