Taurusでお手軽に負荷試験を初めてみる with InfluxDB reporter/Grafana

負荷試験ツールTaurusのチュートリアル
ついでに、InfluxDB reporterとGrafanaを使ってみる

Tutorial of load test tool "Taurus", and tried InfluxDB reporter with Grafana.

Transcript

1. Taurusでお手軽に負荷試験を 始めてみる
 by sasa👾 1
2. 自己紹介
 佐々木 誠治
 - SRE部インフラグループ
 - 21新卒 AWS/Elixir/Ruby/Pythonあたりをよく触っています
 最近の好き
 - 電子ドラム
 - 原神v3.5楽しんでます
 - GCP
 - AfterEffects
 2
3. 負荷試験ツールの紹介です
 3
4. そもそも負荷試験とは
 システムの処理性能を実際に負荷をかけて計測することで、
 - システムの性能を推測する
 - 高負荷時のシステムの性能改善を行う
 - 目標性能を得るために必要なスペックを選定する
 これらを達成するために負荷試験を行います
 4
5. 負荷試験そのものについて参考になる本
 Amazon Web Services負荷試験入門 ――クラウドの性能の引き出し方がわかる Software Design plus
 5
6. Taurusとは
 Taurus は、さまざまなオープンソースの負荷テストツールと機能テストツールを実行する ためのオープンソースの自動化フレームワーク
 Apache JMeter、Gatling、Locust、Selenium のラッパーとして
 使うことができる
 試験シナリオをYAML形式で書くことができる！
 読みは「トーラス」
 ＼お手軽／
 6
7. やってみよう
 時間があったらお手元の環境でも動かしてみてね！
 https://gettaurus.org/docs/Installation/
 
 
 brew install bzt Mac
 Linux
 sudo apt-get update sudo apt-get install python3 default-jre-headless python3-tk python3-pip python3-dev libxml2-dev libxslt-dev zlib1g-dev net-tools sudo python3 -m pip install bzt docker run -it --rm -v /tmp/my-test:/bzt-configs blazemeter/taurus my-config.yml Docker
 ＼お手軽／
 7
8. YAMLファイルの用意
 Taurusのドキュメントをもとに作成
 - concurrency
 - 同時ユーザ数
 - ramp-up
 - 同時ユーザ数に到達するまでの時間 
 - hold-for
 - 同時ユーザ数を保持する実行時間 
 
 execution: - concurrency: 2 ramp-up: 2s hold-for: 20s scenario: Sample scenarios: Sample: default-address: https://blazedemo.com requests: - / example.yml
 デフォルトで、JMeterのExecuterが利用されます 
 8
9. いざ実行
 $ bzt example.yml リアルタイムで負荷状況がわかります 
 9
10. 結果を見てみる
 コンソールに結果が表示されます
 10
11. CSV形式で出力させる
 sample.ymlに以下を追記することで、csv形式で結果を出力できます
 reporting: - module: final-stats summary: true percentiles: true summary-labels: true failed-labels: false test-duration: true dump-csv: ./perf_result_csv.csv 11
12. 他にもTaurusでできること
 実際に負荷試験で使う時は、分散モード(攻撃するサーバを複数台用意)で実行します。
 execution: - distributed: - host1.mynet.com - host2.mynet.com - host3.mynet.com scenario: some_scenario ※workerは自前で立ち上げる必要があります 
 12
13. 他にもTaurusでできること
 オンラインレポートの出力(試用版として、7日間結果の閲覧可)
 reporting: - module: console - module: blazemeter # <- 13
14. 他にもTaurusでできること(new!)
 最近InfluxDB Reporterが追加されました！
 - InfluxDB: オープンソースの時系列データベース
 - 負荷試験の状態が時系列で可視化できそう
 試しに使ってみました(3/18時点: ドキュメント通りにやると失敗しました)
 14
15. やってみること
 InfluxDBに格納したデータをGrafanaで見える化する
 Grafana: データ可視化ツール
 15
16. reporting: - module: influxdb-reporter modules: influxdb-reporter: host: localhost # influxdb address (default: localhost) port: 8086 # port (default: 8086) database: jmeter # the datasource name measurement: taurus # the measurement name username: taurus # username if influxdb authentication enabled password: password # password if influxdb authentication enabled application: hogehoge 結論: 正しく動く設定
 16
17. Influxdbの設定
 InfluxdbとGrafanaをdocker-composeでざっと立てる
 version: "3" services: influxdb: image: influxdb:1.2 platform: linux/x86_64 ports: - 8086:8086 - 8083:8083 environment: - INFLUXDB_ADMIN_ENABLED=true networks: - influxdb-networks grafana: image: grafana/grafana platform: linux/arm64/v8 # M1 Macの場合付ける ports: - 3000:3000 depends_on: - influxdb networks: - influxdb-networks networks: influxdb-networks: 組み込み管理UIを利用したいため1.2を指定 
 8086: InfluxDBのポート 
 8083: 管理UIのポート 
 17
18. Influxdbの設定
 DBとユーザーの作成
 # on influxdb ui(access to http://localhost:8083/) CREATE DATABASE "jmeter" CREATE USER "taurus" WITH PASSWORD 'password' WITH ALL PRIVILEGES 18
19. Taurusを動かして動作チェック
 30秒おきにデータが送信されます
 19
20. Grafanaでグラフとして見てみる
 localhost:3000でアクセスし、ID/PW = admin/adminでログインできます
 20
21. InfluxDBのデータソースを追加
 21
22. ダッシュボードを追加
 試しにavgとpct95.0の項目をグラフに追加してみる
 22
23. ３行まとめ
 Taurusは、手軽にシナリオを書いて負荷をかけるのに便利！
 JMeter・Locust・Gatlingなどの既存のシナリオも再利用できるよ！
 公式のオンラインレポートや、時系列DBへの送信もできるよ！
 23
24. Taurusでお手軽負荷試験ライフを！
 24
25. 参考サイト
 https://gettaurus.org/
 https://docs.influxdata.com/
 手軽に負荷テストができるツール「Taurus」がスゴい
 負荷テストフレームワークのTaurusはいいぞ
 InfluxDB及びGrafanaを利用して為替損益を自動計算し可視化してみた
 Docker上にGrafanaとInfluxDBを構築する
 InfluxDBについて最初に知るべき10のこと
 25
26. java が入っていないことで怒られます
 `brew install` 経由でインストールしたtaurus実行時に Child Process Error: JavaVM isn't found, automatic installation isn't implemented エラーが出た時
 For the system Java wrappers to find this JDK, symlink it with 
 sudo ln -sfn /opt/homebrew/opt/openjdk/libexec/openjdk.jdk /Library/Java/JavaVirtualMachines/openjdk.jdk 
 
 openjdk is keg-only, which means it was not symlinked into /opt/homebrew, 
 because macOS provides similar software and installing this software in 
 parallel can cause all kinds of trouble. 
 
 If you need to have openjdk first in your PATH, run: 
 echo 'export PATH="/opt/homebrew/opt/openjdk/bin:$PATH"' >> ~/.zshrc 
 
 For compilers to find openjdk you may need to set: 
 export CPPFLAGS="-I/opt/homebrew/opt/openjdk/include" 
 
 $ brew install java
 # bew した結果に表示された通りコマンドを実行してみる 
 $ sudo ln -sfn /opt/homebrew/opt/openjdk/libexec/openjdk.jdk /Library/Java/JavaVirtualMachines/openjdk.jdk 
 $echo 'export PATH="/opt/homebrew/opt/openjdk/bin:$PATH"' >> ~/.zshrc 
 
 
 26 `brew install java` 実行時に出てくる文章

27. 今回できたtaurusの設定ファイル全体(example.yml)
 execution: - concurrency: 2 ramp-up: 2s hold-for: 120s scenario: Sample scenarios: Sample: default-address: https://blazedemo.com requests: - / - /vacation.html reporting: - module: final-stats # テスト後の要約統計量を提供します summary: true # 全体的なサンプル数と失敗の割合 percentiles: true # 平均時間と割合を表示 summary-labels: true # サンプルラベル、ステータス、完了率、平均時間、エラーのリストを提供 failed-labels: false # 失敗したサンプルラベルのリストを提供 test-duration: true # テスト期間を提供します dump-csv: ./perf_result_csv.csv - module: console - module: blazemeter - module: influxdb-reporter modules: influxdb-reporter: host: localhost # influxdb address (default: localhost) port: 8086 # port (default: 8086) database: jmeter # the datasource name measurement: taurus # the measurement name username: taurus # username if influxdb authentication enabled password: password # password if influxdb authentication enabled application: hogehoge 27
28. 今回作ったファイルの置き場
 https://github.com/sasasoni/Taurus-InfluxDB-reporter-demo
 
 28