スタブサーバ自動生成ツール〜負荷試験をもっと楽に〜

by teru0x1

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

今日のテーマ負荷試験

Slide 4

Slide 4 text

© DMM 想定する負荷試験対象 4 ● ベンチマークサーバ ○ リクエストをたくさん投げる ● 試験対象システム（SUT: System Under Test） ● 外部API ○ 別の組織が管理してるAPI ○ 勝手に変更できない Amazon Web Services、“Powered by AWS”ロゴ、［およびかかる資料で使用されるその他のＡＷＳ商標］は、米国その他の諸国における、Amazon.com Inc.またはその関連会社の商標です。

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

© DMM スタブサーバ • 外部のAPIと同等の振る舞いをするサーバ • 外部のAPI数が少なくて単純、OpenAPIなどの定義がある場合 • →普通に手作業で作ってもそこまで大変でない • 外部のAPI数が多い（10以上）、複雑、ドキュメントも充実してない場合 • 試験対象のコード（つまり外部APIに対するクライアント側）を見て実装する • →つらい • 外部APIに対するリクエスト/レスポンスをプロキシでキャプチャし、そこから生成 • →業務ではmitmproxyのキャプチャからスクリプトで生成した • https://mitmproxy.org/ • →行き当たりばったり 8

Slide 9

Slide 9 text

gstbgen

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

© DMM ポイント1: いい感じのコード生成 • スタブサーバを生成するのではなく、スタブサーバのGoコードを生成する • 自由に編集できる • 記録したHTTPのフローをそのまま再現するだけでは不適切な場合もあるため • コード生成にはdave/jenniferを利用 16 If(Id("i").Op("==").Id("j")).Block( Return(Id("i")), ) if i == j { return i }

Slide 17

Slide 17 text

© DMM コード生成 17 GET http://external.com/foo mux.HandleFunc("/foo", func(rw http.ResponseWriter, r *http.Request) { if r.Method == "GET" { rw.WriteHeader(200) fmt.Fprint(rw, "{\"contents\":\"hello\"}") return } }) リクエストレスポンス 200 OK {“contents”: “hello”}

Slide 18

Slide 18 text

© DMM 全体のコード生成イメージ host path method query param reqbody response host path method query param reqbody response host path method query param reqbody response host path method query param reqbody response method query param reqbody response path method query param reqbody response mux.HandleFunc("/", func(rw http.ResponseWriter, r *http.Request) { body, _ := stringify(r.Body) if r.Method == "GET" { if q, _ := stringifyUrlValues(r.URL.Query()); q == "{}" { if body == "{\"token\":\"abc\"}" { rw.WriteHeader(200) fmt.Fprint(rw, "{\"foo\":\"bar\"}") return } } } if r.Method == "POST" { if q, _ := stringifyUrlValues(r.URL.Query()); q == "{}" { if body == "{\"token\":\"abc\"}" { rw.WriteHeader(200) fmt.Fprint(rw, "{\"foo\":\"bar\"}") return } } } }) mux.HandleFunc("/hoge", func(rw http.ResponseWriter, r *http.Request) { body, _ := stringify(r.Body) if r.Method == "GET" { if q, _ := stringifyUrlValues(r.URL.Query()); q == "{}" { if body == "{\"token\":\"abc\"}" { rw.WriteHeader(200) fmt.Fprint(rw, "{\"foo\":\"bar\"}") return } } } }) 溜まっていく深さ優先でツリーを巡回して生成

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

© DMM その他話してないこと • コマンドラインツール製作にはurfave/cli/v2を使用 • 引数の処理、自動help生成などが便利 • プロキシのベースとしてはelazarl/goproxyを使用 • TLS、証明書周りは標準ライブラリに入っている • crypto/tlsやcrypto/x509など • GoではOpenSSLに依存せず、自前実装している • そのためGoのスクリプトだけで鍵ペアを生成できる 21