マイクロサービスにおけるテスト自動化 with Karate / Microservices-Testing-Automation-with-Karate

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Copyright © Acroquest Technology Co., Ltd. All rights reserved. 2 自己紹介 ◼ 所属 • Acroquest Technology Co., Ltd. ◼ 主な業務分野 • システムアーキテクト • IoTサービス開発 • ビッグデータ処理プラットフォーム • サーバーレス・アーキテクチャ ◼ バックグラウンド • エンタープライズ／ミッションクリティカル • SEPG／開発／マネジメント • Java／Python 鈴木貴典シニアテクニカルアーキテクト Acro = 先端を quest = 探究する

Slide 3

Slide 3 text

Slide 4

Slide 4 text

「働きがいのある会社(GPTW)」ランキング(従業員25～99人部門) 1位を 3回受賞１位１位１位

Slide 5

Slide 5 text

はじめに Copyright © Acroquest Technology Co., Ltd. All rights reserved. 5 ○：マイクロサービス × ：マイクロサービシズ ○：Microservices × ：Microservice システムアーキテクチャのひとつで、ソフトウェアアプリケーションを独立して配置可能な小さなサービスとして開発し、それらを組み合わせて、ひとつのシステムを実現する手法。もしくは、そうして開発されたシステム自体のこと。

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

空手？

Slide 9

Slide 9 text

出典：BABYMETAL - KARATE (OFFICIAL) - YouTube KARATE？

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Copyright © Acroquest Technology Co., Ltd. All rights reserved. 11 Karate Web-Services Testing Made Simple. • WebサービスAPIのテストを自動化するオープンソースのテストフレームワーク • BDD（Behavior Driven Development）に属するもので、シナリオテストが可能 • Cucumberを元にしており、JavaVM上で実行できるようにしたもの（v0.9より、Cucmber依存はなくなっている） • Garkin記法で、テストシナリオを記述

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

Karateを採用したポイント Copyright © Acroquest Technology Co., Ltd. All rights reserved. 23 ③学習コストが低い • 直観的なテストケース記述 • テスト実行／エラー確認の容易性 • 新人でもハマらず導入 ①シナリオテストが可能 • 連続したテストケース • APIの応答値の利用 ②DSLで記述できる • プログラマでなくても作成できる • データとテストの分離

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

①シンプルなテストケース記述～シナリオの基本構成～ Copyright © Acroquest Technology Co., Ltd. All rights reserved. 26 Feature: sample karate test script Background: * url 'https://jsonplaceholder.typicode.com' Scenario: get all users and then get the first user by id Given path 'users' When method get Then status 200 And assert response.size() === 10 And assert response[0].id == 1 And match response[0] contains { id: 1, name: "Leanne Graham" } https://jsonplaceholder.typicode.com/users に対して GETメソッドでコールして HTTPステータス 200 であることをテストレスポンスの内容をテスト

Slide 27

Slide 27 text

Slide 28

Slide 28 text

①シンプルなテストケース記述～データ記述～ Copyright © Acroquest Technology Co., Ltd. All rights reserved. 28 # MultilineでのJSON指定 * def jsonData = """ [ {name: 'Bob‘, age: 2}, {name: 'Wild', age: 4}, {name: 'Nyan', age: 3} ] """ * match jsonData == [ {name:'Bob', age:2}, {name:'Wild', age:4}, {name:'Nyan', age:3}] # table指定 * table jsonAsTable | name | age | | 'Bob' | 2 | | 'Wild' | 4 | | 'Nyan' | 3 | * match jsonAsTable == [ {name:'Bob', age:2}, {name:'Wild', age:4}, {name:'Nyan', age:3}] Java開発者がうれしいヤツ一目で分かりやすい

Slide 29

Slide 29 text

①シンプルなテストケース記述～Fuzzy Matching～ Copyright © Acroquest Technology Co., Ltd. All rights reserved. 29 # present / notpresent * def test = {id: '001’, name: 'Bob'} * match test == {id: '001’, name: '#present’, age: '#notpresent'} # number * def test = {foo: 1} * match test == {foo: '#number'} # string * def test = {foo: 'test'} * match test == {foo: '#string'} # boolean * def test = {foo: true} * match test == {foo: '#boolean'} パラメータの有無判定パラメータの型判定

Slide 30

Slide 30 text

②HTTP関連の標準対応 Copyright © Acroquest Technology Co., Ltd. All rights reserved. 30 対象コマンド HTTP url Path method status Request param header cookie form multipart Response responseStatus responseHeaders responseCookies responseTime responseTimeStamp responseBytes HTTP（REST）のテストで必要となる要素にはほとんど標準で対応しているテストケース作成の効率が良い！ * header Authorization = ‘xxxxxxxxxx’ Given path 'headers', token

Slide 31

Slide 31 text

③プログラミング言語拡張 Copyright © Acroquest Technology Co., Ltd. All rights reserved. 31 * def greeter = function(name){ return 'hello ' + name } * assert greeter('Bob') == 'hello Bob' JavaScript が使える！何か複雑な処理や判定が必要になる場合でも独自関数で対応することが可能になる

Slide 32

Slide 32 text

③プログラミング言語拡張 Copyright © Acroquest Technology Co., Ltd. All rights reserved. 32 * def dateStringToLong = """ function(s) { var SimpleDateFormat = Java.type('java.text.SimpleDateFormat'); var sdf = new SimpleDateFormat("yyyy-MM-dd'T'HH:mm:ss.SSSZ"); return sdf.parse(s).time; } """ * assert dateStringToLong("2016-12-24T03:39:21.081+0000") == 1482550761081 Java のクラスも実行できる！プロダクトコード／テストコードのクラスなどもテストで使うことができ、効率が上がる

Slide 33

Slide 33 text

Slide 34

Slide 34 text

Slide 35

Slide 35 text

④テストダブル Copyright © Acroquest Technology Co., Ltd. All rights reserved. 35 @ignore Feature: Background: * def uuid = function(){ return java.util.UUID.randomUUID() + '' } Scenario: pathMatches('/v1/cats') * def responseStatus = 201 * def response = { id: '#(uuid())', name: 'Billie' } Scenario: pathMatches('/v1/cats/{uuid}') * def response = { id: '#(uuid())', name: 'Billie' } Scenario: pathMatches('/v1/dogs') * def responseStatus = 201 * def response = { id: '#(uuid())', name: 'Dummy' } Scenario: pathMatches('/v1/dogs/{uuid}') * def response = { id: '#(uuid())', name: 'Dummy' } テストダブルとして動作させる場合のKarateシナリオ

Slide 36

Slide 36 text

Slide 37

Slide 37 text

Slide 38

Slide 38 text

⑥E2E（End-to-End）テストでの利用 Copyright © Acroquest Technology Co., Ltd. All rights reserved. 38 https://twitter.com/ptrthomas/status/1046459965668388866 WebDriverを利用してのブラウザ実行も可能（Se○○nium!?）シナリオを Karateの形式で記述 v0.9.0 New

Slide 39

Slide 39 text

さらに・・・ Copyright © Acroquest Technology Co., Ltd. All rights reserved. 39 ①REST-API／JSON 以外にも対応 • GraphQL • gRPC • WebSocket • バイナリリクエスト／レスポンス ②Karate UI • GUIで、ステップ実行／デバッグ可能 ③JUnit5サポート ④Dynamic Scenario Outline v0.9.0 New