性能試験はCI/CDにお任せ

Slide 1

Slide 1 text

2022/03/23　Kubernetes Novice Tokyo #17 Kubernetes 基盤における非機能試験の deepdive 〜性能試験は CI/CD にお任せ！〜氏名：逆井啓佑（さかさいけいすけ）

Slide 2

Slide 2 text

自己紹介 - 2022/03/23 Kubernetes Novice Tokyo #17 - 逆井啓佑さかさい belongs：日系 Sier carrier：　　一年目：”決済サービスの企画・営業 ” 　　二年目：”Kubernetes 基盤の非機能試験チーム ” # 参画直後、k8s や IaC (terra/helm) …?? # 試験環境に太古の tf ファイルを apply し環境破壊を経験 kind: destroyer description：　　　最低限の技術力を身につけなければ...ということで、　　　会社の研修制度で CN・Kubernetes 塾に参加し、半年間の研鑽ついこの前修了発表なるものが終わりました！

Slide 3

Slide 3 text

ついこの前修了発表なるものが終わりました！ belongs： carrier：　　一年目：”決済サービスの企画・営業 ” 　　二年目：”Kubernetes 基盤の非機能試験チーム ” # 参画直後、k8s や IaC (terra/helm) …?? # 試験環境に太古の tf ファイルを apply し環境破壊を経験 kind: destroyer description：　　　最低限の技術力を身につけなければ...ということで、　　　会社の研修制度で CN・Kubernetes 塾に参加し、半年間の研鑽自己紹介 - 2022/03/23 Kubernetes Novice Tokyo #17 - 逆井啓佑さかさい本日は、研修活動での半年間の成果を短く LT させてください！研修のモノもあるので、少ーしだけカタイ見栄えとなるかもです... ・・・

Slide 4

Slide 4 text

イントロダクション半年間の活動では、なんちゃって非機能試験担当として、「k8s 基盤での非機能試験 deepdive」というテーマで活動をしておりました。 ※ 性能 / 可用性 / セキュリティとか - 2022/03/23 Kubernetes Novice Tokyo #17 - ❶ 性能試験自動化 ● GKE, Gitlab CI, Argo CD を用いた、 GitOps なインフラストラクチャの構築 ● 性能試験を CI/CD に組み込み、デプロイ検知で自動実行 ❷ カオスエンジニアリング ● 障害試験ツール「Chaos Mesh」を用いた、 k8s 基盤における障害試験の検証 demo付

Slide 5

Slide 5 text

Slide 6

Slide 6 text

性能試験における課題感とある、性能試験の一日...（実際の現場を、かなりイメージで示しています）開発 Tm Me (試験 Tm) テスト環境 ① 新しい資材のデプロイ ② 「性能試験よろ」 ③ 負荷試験ツール Gatling を手動で実行 ④ 終わったら結果解析💦 - 2022/03/23 Kubernetes Novice Tokyo #17 -

Slide 7

Slide 7 text

性能試験自動化のモチベーション - 2022/03/23 Kubernetes Novice Tokyo #17 - とある、性能試験の一日...（実際の現場を、かなりイメージで示しています）開発 Tm Me (試験 Tm) テスト環境 Gatling コンテナの Job 実行 ③ 負荷試験ツール Gatling を手動で実行 ② 「性能試験よろ」 ① 新しい資材のデプロイ Argo CD を用いたデプロイ検知 (おまけ) ● Slack への解析通知 ● GCS への Report UPL ④ 終わったら結果解析💦 Argo CD GitOps に則った CD ツール。自動デプロイ・同期などの機能を持つ。 ② 「性能試験よろ」 ① 新しい資材のデプロイ ③ 負荷試験ツール Gatling を手動で実行

Slide 8

Slide 8 text

性能試験自動化のモチベーションとある、性能試験の一日...（実際の現場を、かなりイメージで示しています）開発 Tm Me (試験 Tm) テスト環境結果フィードバックデプロイテスト GitOps な CI/CD にテストを組み込み、高品質でアジリティーの高いリリース基盤を構築 - 2022/03/23 Kubernetes Novice Tokyo #17 -

Slide 9

Slide 9 text

今回構築したものはこれ - 2022/03/23 Kubernetes Novice Tokyo #17 - APP のリソース (manifest) を管理 Gatling APP(自作) のイメージを管理 nginx app

Slide 10

Slide 10 text

apiVersion: batch/v1 kind: Job metadata: name: gatling-job annotations: argocd.argoproj.io/hook: PostSync spec: template: spec: volumes: - name: google-cloud-key secret: secretName: cn-ksakasai-gcs-accesskey containers: - name: postsync image: registry.gitlab.com/keisuke.sakasai/gatling:main command: - sh - "-c" - | /bin/bash <<'EOF' ###--- Gatling の実行 /opt/gatling/bin/gatling.sh -s computerdatabase.SampleSimulation ###--- GCS への Report UPL /root/google-cloud-sdk/bin/gcloud auth activate-service-account --key-file=/var/secrets/google/cn-ksakasai-gcsAccess.key /root/google-cloud-sdk/bin/gsutil … ###--- Gatling Report の解析 timestamp=${fn:17:4}"/"${fn:21:2}"/"${fn:23:2}" "$((${fn:25:2}+9))":"${fn:27:2}":"${fn:29:2}"" … res=$(cat $fn_js | jq .stats.percentiles4.total) #--- Slack への通知 cp -rf /usr/bin/curl /root/; /root/curl -X POST --data-urlencode "payload={…}" https://hooks.slack.com/services/xxx EOF ちょっとだけ詳細（ジョブのマニフェスト） Resource Hookの設定 - Argo CD のデプロイ終了を検知して実行 Gatling コンテナイメージの指定 - Gitlab CI でビルドされたものコンテナ内処理 ● Gatling 実行 ● GCS へのレポートアップロード ● レポート解析 / Slack 通知 - 2022/03/23 Kubernetes Novice Tokyo #17 -

Slide 11

Slide 11 text

デモンストレーション - 2022/03/23 Kubernetes Novice Tokyo #17 -

Slide 12

Slide 12 text

まとめ - 2022/03/23 Kubernetes Novice Tokyo #17 - 自分の手を動かし、構築することで、 Kubernetes 初学者になることができました

Slide 13

Slide 13 text

最後に (恐縮ですが) 宣伝 - 2022/03/23 Kubernetes Novice Tokyo #17 - カオスエンジニアリングについての講演をするかも... 抽選中...

Slide 14

Slide 14 text

記載されている会社名、商品名、またはサービス名は、各社の商標登録または商標です。