QAエンジニアが伝えたい品質保証の羅針盤 / Compass for Quality Assurance

Slide 1

Slide 1 text

QAエンジニアが伝えたい品質保証の羅針盤品質もスピードもあきらめないプロダクト開発ってなに？ miisan (@mii________san) 2024/5/9

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

© 2023 Reiwa Travel, Inc.  ⾃⼰紹介 4  Background 新卒：ERPパッケージの開発‧QA業務などを担当。 2社⽬：メルペイのコアローンチ前にQA Engineerとして参画。Lead QA Engineerを経て、QA EMとしてサービス全体の品質向上、QA組織作りをリードする。 3社⽬：令和トラベルで1⼈⽬QA Engineerとして、QA組織の⽴ち上げや『NEWT』の品質⽂化を推進。DevRev、 QA/WebチームのEMなどを兼務し、現在は開発イネーブリングUnit⻑として、開発組織全体をリードする。 Other スタートアップ企業のQA⽀援や⼥性エンジニアの推進活動に取り組む。(参考) 趣味は、旅⾏とダイビング🤿 最近、⼼理カウンセラーの資格を取得しました✍ QA Group/ Web Group EM 開発イネーブリングUnit⻑ miisan

Slide 5

Slide 5 text

© 2023 Reiwa Travel, Inc.  ⾃⼰紹介 ● スタートアップ企業のEngineering Manager ○ QA GroupとFrontend Groupのマネージャーを兼務 ○ 専⾨領域と⾮専⾨領域のマネジメントを並⾏で⾏い、チームの成果最⼤化を⽬指す ● 1⼈⽬QA EngineerとしてQA Groupの⽴ち上げ ○ 品質⽂化のないところにQAチームを創設し、⽂化や仲間を集める ○ ゼロイチの挑戦と拡張 ● エンジニアリング広報‧DevRelの⽴ち上げ ○ エンジニアブログ‧イベントの主催、企画 ● 開発イネーブリングUnitの創設とUnit⻑ ○ 組織スケールをみすえたプロダクト開発の進化に向け、プロダクト開発組織‧体制の構築と推進 ○ 組織マネジメントやチームビルディングの強化など、エンジニア組織のカルチャー作り 5  直近のおしごと

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Slide 17

Slide 17 text

© 2023 Reiwa Travel, Inc.  品質保証とは？ 17  品質保証を考える上でのポイント “品質”は抽象度の高い概念であるため、品質の定義や解釈を揃えることで、チーム全員が自走した形でプロダクト開発に向き合える！ ● 「品質保証をする」が何かは、会社やプロダクト、サービスの特性によって変わる ○ エンタメサービスと⾦融サービスで同じ品質基準になることが適切なのか？ ● 「私たちは良いプロダクトを作っています！」の “良いプロダクト”‧”良い品質”について、チームで同じ解釈で語れるか？ ○ 異なる解釈を持って進むと、バラバラのゴールに辿り着いてしまう ● 「カスタマーにとっての価値を作る」とは⼀体何か？ ○ 価値の解釈が異なると、優先順位に齟齬がでる

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

© 2023 Reiwa Travel, Inc.  テストとは 29  既知の不具合が起きないことの確認未知の不具合を探す作業 1 2 ● 要求や仕様、記述通りの正しい振る舞いをするか ● コードを変更してもこれまでと同じように動作するか ● プロダクトを学習、探索・未知なるものを探す ● プロダクトを評価し、想定外の問題を発見する目的を持ちテストする Checking Exploring 1 + 2 = Tested

Slide 30

Slide 30 text

Slide 31

Slide 31 text

Slide 32

Slide 32 text

Slide 33

Slide 33 text

Slide 34

Slide 34 text

Slide 35

Slide 35 text

Slide 36

Slide 36 text

Slide 37

Slide 37 text

Slide 38

Slide 38 text

Slide 39

Slide 39 text

Slide 40

Slide 40 text

Slide 41

Slide 41 text

Slide 42

Slide 42 text

Slide 43

Slide 43 text

© 2023 Reiwa Travel, Inc.  テストについて 43  タイプテストの種類非機能テスト ● パフォーマンス観点 1. 時間効率性 a. システムが応答、処理などを実行する速度要件を満たしているか 2. 容量満足性 a. 同時利用数やデータ許容量などシステムの容量が要求を満たしているか ● カスタマー体験観点 1. 習得性 a. カスタマーが使い方を学習しやすいか 2. エラー防止性 a. システムが誤動作しないように防止できているか 3. アクセシビリティ a. 幅広い範囲の心身特性や能力の人が利用し、目的を達成することができるか

Slide 44

Slide 44 text

Slide 45

Slide 45 text

Slide 46

Slide 46 text

Slide 47

Slide 47 text

Slide 48

Slide 48 text

Slide 49

Slide 49 text

© 2023 Reiwa Travel, Inc.  アジャイルテスティングとは 49  なぜアジャイルテスティングの考え方が必要なのか？「最後の砦」としてのQAエンジニアの品質活動の限界 Design Requirements Specing Coding Testing QAエンジニアの主な役割がテストすることだとすると、開発プロセスにおいて関わる領域が狭く、リリース直前での「守り」しかできない。

Slide 50

Slide 50 text

Slide 51

Slide 51 text

© 2023 Reiwa Travel, Inc.  アジャイルテスティングとは 51  なぜアジャイルテスティングの考え方が必要なのか？「網」（= テスト）は完全でないから特定の工程のみでの品質向上に依存せず、「全プロセス（全員）」で信頼性の総和を向上させる必要がある要件定義 -> デザイン設計 -> 開発設計 -> 実装 -> テスト -> デプロイのソフトウェア開発における各フェーズで、何ができるかを考えることが重要！

Slide 52

Slide 52 text

Slide 53

Slide 53 text

Slide 54

Slide 54 text

© 2023 Reiwa Travel, Inc.  アジャイルテスティングとは 54  品質保証にチーム全体で取り組む"チームごと化”のコツはチームメンバー全員が「いい品質ってなに？」を、言葉にできますか？言語化できないこと、方向性が一致していないことをチームでおえるわけがない自分たちが目指したい・ありたい姿を共通でもつことで、品質に向き合う可能性を引き上げる 💪 チームで、「品質とはなにか」について話してみることや、これまで起きた不具合や障害を振り返ることからはじめてみては？さらにそこから「品質」を定量化することで、自然とチーム目標が設定できる。品質に関する目標をチームで持ってみよう！

Slide 55

Slide 55 text

© 2023 Reiwa Travel, Inc.  令和トラベルでの取り組み ● 品質についての理解を全員で揃える : ⼊社者へのQAオンボーディングの実施、品質の⾔語化 ○ 参考：“品質”をみんなのものにするために⾏なっている⼊社者オンボーディング ● 仕様検討から漏れを減らす : Product MTGを毎週開催し、プロダクトメンバーですり合わせ ● カスタマー体験の認識合わせ : デザインコンセプト‧ガイドラインの型化 ○ 参考：⼀貫したUXをつくるためのプロセス ● 実装時の要件漏れを減らす : Figmaの更新プロセスやドキュメントの更新 ○ 参考：「Figma」の運⽤⽅法 ● 開発者⾃⾝で問題に気づく : Sanity testの導⼊、開発者QAプロセスとチェックリスト ○ 参考：初期品質向上のためのQA⽬線での取り組み ● コーディングの品質を担保する : PRレビュー、E2Eテスト ● チームで体験に責任を持つ : dogfooding‧プロダクトおさわり会を開催 ● リリース後体験の満⾜度を確認する : 品質に関する健康状態を可視化し、モニタリングする ○ 参考：QA組織を⽴ち上げ、QA⽂化を築いてきた1年間を振り返る 55  チームや役割の垣根を超え、あらゆるフェーズで品質を⾼めるために👀

Slide 56

Slide 56 text

Slide 57

Slide 57 text

Slide 58

Slide 58 text

Slide 59

Slide 59 text

Slide 60

Slide 60 text

© 2023 Reiwa Travel, Inc.  ディスカッションテーマ 60  「私たちが考える良い品質とは」について話してみよう！ “ディスカッションのヒント” 1. あなたが意識して行っている品質活動はありますか？ 2. あなたのチームで行っている品質活動はありますか？ 3. 今、チーム/個人で抱えている品質課題はありますか？ 4. 目指したい・理想の品質活動はなにか？ディスカッション後は、自身のサービスにおける”良い品質”について言葉にしてみましょう！そのためのヒントを皆さんからもらいましょう👩

Slide 61

Slide 61 text

Slide 62

Slide 62 text

Slide 63

Slide 63 text

© 2023 Reiwa Travel, Inc.  まとめ 63  品質保証とはなにか？品質保証とは、99.99…点を目指し続ける活動のこと。品質は変化し、様々な視点によって受け取り方が変わるもの。だからこそ、正解がなく、めちゃくちゃ難しい。トレード・オフや妥協はとても簡単。でもやるなら、難しいことを超えていきたい。一人ではできなくても、チームメンバー全員が同じことを思い、サービスと向き合うことで、達成確率は格段に上がると信じている。

Slide 64

Slide 64 text

Slide 65

Slide 65 text

© 2023 Reiwa Travel, Inc.  まとめ 65  品質保証とはなにか？品質保証とは、99.99…点を目指し続ける活動のこと。 QAエンジニアは、妥協や乖離が大きくなる前に打ち手を考え、チームの羅針盤としてチームをリードしていくことが重要です。もしもQAエンジニアがいない組織なら、皆さんが良いプロダクトを作ることからはじめ、輪を広げていこう。「やる」か「やらないか」が、良いサービスを作り続けられるかどうかの「すべて」です。

Slide 66

Slide 66 text

Slide 67

Slide 67 text

Slide 68

Slide 68 text

Slide 69

Slide 69 text

Slide 70

Slide 70 text

Slide 71

Slide 71 text

Slide 72

Slide 72 text

Slide 73

Slide 73 text

© 2023 Reiwa Travel, Inc.  私のこれからのキャリアテーマ 73  ● 私の経験値 ○ 会社軸：スタートアップ・メガベンチャー・大企業 ○ フェーズ軸：ゼロイチ・立ち上げ・グロース ○ 職能軸：開発・QAエンジニア・PM・採用・広報 ○ 職務軸：メンバー・チームリーダー・マネージャー・部門長これらの経験は、QAエンジニアをしていたからできたことだと思っている QAエンジニアのキャリアパスは “無限∞”