アジャイル開発における段階的品質の積み上げによる品質保証

Slide 1

Slide 1 text

アジャイル開発における段階的品質の積み上げによる品質保証 2019/09/12 ソフトウェアプロセス＆品質改善部伊藤潤平ソフトウェア品質シンポジウム2019 C1-4

Slide 2

Slide 2 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 2 自己紹介 • 伊藤潤平 • ウイングアーク１ｓｔ株式会社 • 2008年入社以来ずーっとQA • 活動： • SQiPシンポジウム2017論文発表 • ANQ Congress 2017論文発表 • SPI Japan 2018 プレゼン発表 • 日本品質管理学会ソフトウェア部会 • SQiP研究会2018 研究コース4:アジャイルと品質 • SQiPシンポジウム2019論文発表 • 趣味：日本酒（新潟限定）、筋トレ（健康志向）

Slide 3

Slide 3 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 文雅科信息技术（大连）有限公司文雅科信息技术（上海）有限公司 WingArc Singapore Pte. Ltd. WingArc Australia Pty Ltd 東京（本社）仙台新潟札幌広島福岡大阪名古屋 3 ウイングアーク１ｓｔ株式会社 JAPAN 8拠点 GLOBAL 4拠点 • 商号：ウイングアーク１ｓｔ株式会社 (WingArc1st Inc.) • 所在地：〒106-6235東京都港区六本木三丁目2番1号六本木グランドタワー • 創業：2004年3月 • 資本金：2億円 • 事業内容：ツール・ミドルウエア製品の開発・販売、導入支援・保守サポートサービスの提供 • 従業員数：連結607人／単体522人（2019年2月末現在）会社情報

Slide 4

Slide 4 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 4 ソフトウェア基盤事業業務に欠かせない帳票の効率的な運用を支援ビジネスの現場から日々の暮らしのシーンまで、さまざまな場所で利用されている帳票。その設計・出力、運用を支えるソリューションおよびサービスを提供しています。業務処理におけるすべての帳票を対象としており、大手企業や官公庁を中心に多くの企業・団体に導入されています。帳票の利用シーンソフトウェアサービス市場シェア（SVF、EUR）販売実績あらゆるシーンで利用される帳票の、安定的かつ効率的な出力・運用を支援しています。帳票クラウドサービス「SVF Cloud」の提供で、より幅広い企業に導入いただいています。 SVFの累計導入社数は2万1000社にのぼり、10年以上にわたってトップシェアを維持しています。 SVFの特長のひとつである「保守継続率の高さ」が、ソフトウェア基盤事業の安定的な成長を下支えしています。公的証明書宅配伝票航空券・チケット保険設計書帳票基盤ソリューション帳票クラウドサービス国内シェア第1位 62.8% ※ミックITリポート2017年「帳票設計・運用製品の市場動向、帳票運用製品」（2017年度）をもとにウイングアーク１ｓｔが作成。日立製作所と帳票分野で提携（2018年4月）し、同社が保有する帳票ソフト「EUR」の資産取得を行ったことに伴う数値。リカーリングライセンス 2013 2014 2015 2016 2017 （億円） 83 83 84 91 102

Slide 5

Slide 5 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 5 データエンパワーメント事業成長のための業務改革をデータ活用からサポート限られた人員でも、最大限の成果をあげたい̶̶̶̶多くの企業が抱えるそんな想いを実現するために必要なのは、データに基づく意思決定・行動です。適切なデータを、適切なタイミングに、適切な形で見られるよう環境を整備するための製品・ソリューション・サービスを提供しています。実現できることソフトウェアサービス市場シェア(Dr.Sum、MotionBoard) 販売実績ビジネスの現場が抱えるさまざまな課題。データ活用によって解決できるものは少なくありません。企業内外の情報をデータ化・管理し、必要なときに集計・分析・可視化する製品・サービスを提供しています。 BI市場の成長を牽引するリーディングカンパニーとなっています。大規模での導入やソリューション化（複数の製品の組み合わせ）の推進により、成長が加速しています。製造IoT 働き方改革営業改革アナリティクス集計・分析プラットフォーム国内シェア第1位 15.9% ※株式会社アイ・ティ・アール「ITR MARKET VIEW DBMS/BI市場 2018」データ分析／レポーティング市場：ベンダー別売上金額推移およびシェア(2016年度) 2013 2014 2015 2016 2017 （億円） 30 32 37 42 54 BIダッシュボード電子活用ソリューション Dr.Sum SPA MotionBoard ソリューション Salesforceデータ編集ツール第三者データ提供サービス

Slide 6

Slide 6 text

Quality Assurance by quality stepwise refinement in Agile Development アジャイル開発における段階的品質の積み上げによる品質保証

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

フレームワーク実践ポイント戦略的テスト計画の作成フェーズと品質ゲートの設置による段階的品質の積み上げ

Slide 14

Slide 14 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 14 戦略的テスト計画の作成プロダクトバックログ（PBL）フェーズテストプラン（PTP）マスターテストプラン(MTP) 品質目標テストタイプ機能適合性性能効率性互換性使用性信頼性セキュリティ保守性移植性フェーズ1 機能テストユースケーステスト性能テスト互換性テストローカライゼーションテストバリデーションテスト強制エラーテストセキュリティテスト解析性テストプラットフォームテスト機能テスト互換性テストフェーズ2 ユースケーステスト機能テストフェーズ3 性能テストプラットフォームテストフェーズ1 PBI PBI フェーズ2 PBI PBI フェーズ3 PBI PBI

Slide 15

Slide 15 text

Slide 16

Slide 16 text

事例マスターテストプラン（MTP）の作成フェーズテストプラン（PTP）の作成フェーズ毎の品質ゲート設定結果

Slide 17

Slide 17 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 17 マスターテストプラン（MTP）の作成品質特性副特性品質目標テストタイプ機能適合性機能完全性顧客修正予定となっている潜在不具合がすべて修正されている要望が実装され機能する要件確認テストリリーステスト最終リグレッションテスト機能正確性実装された機能が正しく動作する母体機能が正しく動作する新機能と母体機能を組み合わせた動作が正しく動作する新機能テスト既存機能テスト機能適切性想定するユーザーシナリオが満たされるシナリオテスト性能効率性時間効率性既存機能の処理時間が初期版と比較し劣化が発生していない性能テスト資源効率性新機能を含んだ一連の操作の断続的な利用で不正なハードウェアリソースの使用が発生しないロードテストマスターテストプラン（MTP）の品質目標 ※一部抜粋

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 19 計画時のフェーズテストプラン（PTP）フェーズ1 (新機能A) フェーズ2 (新機能B) フェーズ3 (新機能C) Sprint1 Sprint2 Sprint3 Sprint4 Sprint5 Sprint6 Sprint7 Sprint8 Sprint9 品質ゲートフェーズ4 (システムテスト) 品質ゲート RC フェーズ品質ゲート品質ゲート

Slide 20

Slide 20 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 20 最終時点でのフェーズテストプラン（PTP）フェーズ1 (パッチ1) フェーズ2 (パッチ2) フェーズ4 (新機能A,B,C) Sprint1 Sprint2 Sprint3 Sprint4 Sprint5 Sprint6 Sprint7 Sprint8 Sprint9 品質ゲートフェーズ5 (システムテスト) 品質ゲート RC フェーズフェーズ3 (パッチ3) 品質ゲート品質ゲート品質ゲート

Slide 21

Slide 21 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 21 フェーズテストプラン（PTP）と品質ゲートフェーズ期間テストタイプ品質ゲートクライテリアフェーズ1 Sprint1 Sprint2 9.3.4.1パッチ検証 • 要件確認テスト • 既存機能テスト • リグレッションテスト • パッチ適用テストピックアップテスト • 各テストタイプから約20%を抽出して実施 • すべてのテストタイプで不具合0件フェーズ4 Sprint5 Sprint6 Sprint7 機能テスト • 要件確認テスト • 新機能テスト • シナリオテスト • ローカライゼーションテスト • ユーザーエラー防止性テスト • バリデーションテスト • セキュリティテスト • プラットフォームテストピックアップテスト • 各テストタイプから約20%を抽出して実施 • すべてのテストタイプで不具合0件リグレッションテスト • フェーズ1～3で実施したテストについて機能完全性レベルのテストケースを抽出して実施 • すべてのテストケースで不具合0件・・・

Slide 22

Slide 22 text

Copyright © 2019 WingArc1st Inc. All Rights Reserved. 22 フェーズテストプラン（PTP）と各フェーズの結果フェーズ結果フェーズ1 合格ピックアップテスト（37.0%を抽出）を実施フェーズ2 合格ピックアップテスト（36.4%を抽出）を実施フェーズ3 合格ピックアップテスト（25.4%を抽出）を実施フェーズ4 1回目不合格ピックアップテストの結果2件の不具合を検出 6件の追加検証を実施し問題ないことを確認 2回目不合格ピックアップテスト中に開発内で1件の不具合が検出 QAの指摘内容が検証されていなかったことが原因。影響範囲についての検証を16件追加 3回目不合格開発内でテストエビデンスに不備が見つかり，不具合が1件検出テスト設計者と実施者間でのコミュニケーション不足が原因。影響範囲について42件のテストを追加 4回目合格追加されたテストケースすべてを対象フェーズ1から3までのリグレッションテストを実施