Slide 1

Slide 1 text

ソフトウェアテスト 2022-05-19 サイボウズ開運研修 小山晃久(Garoon/生産性向上)

Slide 2

Slide 2 text

ソフトウェアテストの位置づけ 「ソフトウェアテストはソフトウェアの品質を評価し、運用環境でソフト ウェアの故障が発生するリスクを低減する1つの手段である。」 (JSTQB FL p.15) JSTQB FL 1.1

Slide 3

Slide 3 text

よいソフトウェアテストをやっていくには? よいソフトウェアテスト 適切な情報を、適切なタイミングで、適切な相手にフィードバックする

Slide 4

Slide 4 text

適切な情報 テストによってさまざまな情報を得ることができる テストに抜け・漏れがあり、適切な情報を取得できないのは避けたい

Slide 5

Slide 5 text

適切なタイミング 重大な不具合は早くフィードバックしたい

Slide 6

Slide 6 text

適切な相手 テストで得られた情報が欲しいのは誰だろう?

Slide 7

Slide 7 text

どうやってよいテストを実現するか テストは「テスト実行」だけからなるわけではない

Slide 8

Slide 8 text

テスト活動とテストプロセス テスト計画 テストのモニタリングとコントロール テスト分析 テスト設計 テスト実装 テスト実行 テスト完了 今回は、テスト分析~テスト実行を扱う JSTQB FL 1.4

Slide 9

Slide 9 text

1. 何をテストすればよいだろう か?––––テスト分析

Slide 10

Slide 10 text

機能のテストを考えてみよう 題材: 「Garoon のスケジュールのコメントで、参加者全員宛の宛先 指定をできるようにする」機能 機能のイメージは次のページにあります

Slide 11

Slide 11 text

No content

Slide 12

Slide 12 text

何をテストしよう? 仕様通りであること?

Slide 13

Slide 13 text

「仕様通り」の罠 仕様通りでも、ユーザーの課題を解決していないことがある Verification(正しく作っているか?)だけでなく、Validation(正しい ものを作っているか?)も重要 JSTQB FL 1.1

Slide 14

Slide 14 text

ユーザーや関わる人は誰だろう? 今作っているものは誰のためのもの? その人はそれをどうやって使 う? 直接のユーザー以外にもこれに関わる人はいる?

Slide 15

Slide 15 text

リスク分析 今作っているものが上手く動かなかったとき、何が起こるだろう?

Slide 16

Slide 16 text

テスト対象は何からなる? 図示してみる 機能以外にも、注目すべき点があるかも

Slide 17

Slide 17 text

仕様 どんな機能? 何ができる? 仕様に不足はない?

Slide 18

Slide 18 text

機能の周辺 影響があるところは? 過去の不具合は?

Slide 19

Slide 19 text

まとめ: テスト分析 何をテストするのかを決める そのために、必要な情報を集め、分析する

Slide 20

Slide 20 text

2. どうテストすればよいだろう か?––––テスト設計

Slide 21

Slide 21 text

欠陥の偏在 欠陥は特定の箇所に集中していることが多い リスクに応じてテストの優先度や細かさを変えていくとよい JSTQB FL 1.3

Slide 22

Slide 22 text

全数テストは不可能 すべての事前条件、入力を網羅するのは難しい テスト技法を使って、テストすべきことを絞り込んでいく JSTQB FL 1.3

Slide 23

Slide 23 text

テストを設計しよう どのようにテストする領域を分ける? どの領域をどの優先度で行う? どうやってテストケースを作る? 自動でやる? 手動でやる?

Slide 24

Slide 24 text

テストする領域の分割 必要であれば、テスト分析結果を踏まえて領域を分けていく 参加者全員宛の宛先指定をできるようにする機能の例 UI のテスト、通知のテスト、ユースケースに従ったテストなどに分けられそう それぞれのテストで、共通する観点もあれば異なる観点もある

Slide 25

Slide 25 text

テスト技法によるテストケースの絞り込み 全数テストは不可能なので、テストケースを実現可能な数に絞り込む 必要がある ただし、重要なケースが漏れるのは避けたい こういう場合にテスト技法が使える

Slide 26

Slide 26 text

テスト技法の例:同値分割法 同等に処理されると想定したデータをひとまとまり(同値クラス)にし て扱う 例: パスワードは8文字以上100文字以下 0や負の値なども、無効同値クラスと扱ってよい? 8 7 100 101 有効 無効 無効 JSTQB FL 4.2.1

Slide 27

Slide 27 text

テスト技法の例:境界値分析 同値クラスの最小値、最大値(境界値)を使ってテストする 例: パスワードは8文字以上100文字以下 8 7 100 101 JSTQB FL 4.2.2

Slide 28

Slide 28 text

テスト技法は他にも色々 デシジョンテーブルテスト、状態遷移テスト、ユースケーステスト、 All Pair法、…… 技法を使う理由を説明できるのが重要 JSTQB FL 4

Slide 29

Slide 29 text

ハイレベルテストケース 具体的な入力値と期待結果の値が記載されていないテストケース 対義語: ローレベルテストケース(具体的な値や手順が記載されて おり、実行できるテストケース) JSTQB FL 1.4.3

Slide 30

Slide 30 text

まとめ: テスト設計 テスト分析を踏まえつつ、何をどうテストするのか決める 欠陥が偏在することや、全数テストが不可能であることを踏まえて、テ ストの優先度や、テストケースの粒度も決める

Slide 31

Slide 31 text

3. テストを実行するためには何 が必要か?––––テスト実装

Slide 32

Slide 32 text

テストケース 設計したテストを、実施可能な形にする 形式は様々(表、チェックリスト、プレーンテキスト、……) テスト分析やテスト設計の成果物に基づいて作成する

Slide 33

Slide 33 text

テスト環境 正確なバージョンのテスト環境を構築する 自動化がおすすめ

Slide 34

Slide 34 text

テスト自動化 テストプロセスに割り当てるなら、テスト自動化の実装もここ

Slide 35

Slide 35 text

まとめ: テスト実装 テストを実行可能な状態にする いきなりここからやると、テストケースの抜け・漏れや重複が発生する かも

Slide 36

Slide 36 text

4. 探索とフィードバック––––テ スト実行

Slide 37

Slide 37 text

いざテスト実行 作成したテストケースを実行していく

Slide 38

Slide 38 text

テスト実行のテクニック 楽できないか考える 細かいことでもメモを残す 違和感やちょっと気になることを大事にする

Slide 39

Slide 39 text

想定外の事態が起こったら 不具合かどうか確認 適切なタイミングでのフィードバック ブロック要素の管理

Slide 40

Slide 40 text

不具合報告 チームごとの不具合管理方法に従って不具合を管理 BTS (Bug Tracking System) に不具合を登録するなど 不具合の再現に必要十分な手順を記載する JSTQB FL 5.6

Slide 41

Slide 41 text

テスト実行 テストを実際に実行するフェーズ ソフトウェアテストはこのフェーズだけから成り立つわけではない

Slide 42

Slide 42 text

ソフトウェア開発ライフサイク ルとテスト

Slide 43

Slide 43 text

ソフトウェア開発ライフサイクル 例: スクラム

Slide 44

Slide 44 text

スクラムイベントとテスト スクラムイベントに合わせて、どのようにテストを行っていくか? 以下は一例です

Slide 45

Slide 45 text

リファインメント テストのことを考えながらバックログを見てみる(テスト分析) ユーザーが実際に行う操作は? テストしやすい? 例外処理は考慮されている?

Slide 46

Slide 46 text

スプリントプランニング 何を作るかの認識を合わせつつ、テスト設計を行ってみる(テスト分 析、テスト設計) 実装に関する議論を聞きながら、テストすべき箇所やテストしなくてよい箇所 を考える/聞く テストの観点を出してみる(何をテストするか) テストケースの型を考えてみる(どうテストするか)

Slide 47

Slide 47 text

スプリント内 実装の状況に応じてテスト設計をアップデート(テスト設計) テスト設計に基づきテストケースを作成(テスト実装) 手動テストするテストケースの特定 自動テストの作成 実装が完了したらテスト開始(テスト実行) 不具合が出たらすぐにフィードバック

Slide 48

Slide 48 text

まとめ

Slide 49

Slide 49 text

まとめ 適切な内容を、適切なタイミングで、適切な相手にフィードバックし ていくために、 テスト分析で何をテストするのか考え、テスト設計でどうテストするの か考え、テスト実装でテストを実行可能にし、テストを実行しよう テスト計画 テストのモニタリングとコントロール テスト分析 テスト設計 テスト実装 テスト実行 テスト完了

Slide 50

Slide 50 text

参考文献 [JSTQB FL] ISTQB著、JSTQB訳、「ISTQBテスト技術者資格制度 Foundation Level シラバス 日本語版 Version 2018V3.1.J03」、 2021 https://jstqb.jp/dl/JSTQB- SyllabusFoundation_Version2018V31.J03.pdf