Kibanaでログ分析を1年続けてみたら業務システムの保守と運用が捗った / How&Why I have been leveraging Kibana for DevOps

Kibanaでログ分析を1年続けてみたら業務システムの保守と運用が捗った / How&Why I have been leveraging Kibana for DevOps

C0eb1445cda9489ebf8c31c367fec3fb?s=128

TATSUNO Yasuhiro

April 05, 2015
Tweet

Transcript

  1. 1

  2. • • • 2

  3. 3

  4. 4

  5. • • • 5

  6. • • • 6

  7. 7

  8. • • • 8

  9. 9

  10. • • • • 10

  11. 11

  12. • • • • 12

  13. • • Javaプロセスがプロキシ経由してFW抜けられるように設定 export set JAVA_OPTS="-Dhttp.proxyHost=XXX -Dhttp.proxyPort=XXX" 13

  14. 14 さすがにelasticsearch使ってる時に他がもっさりするので、常時起動はキビシイ。 が、ある程度の分量(数千万~数億行程度)のログ分析には開発PC一台でもイケました。 分析で得られた知見をチームで活用し「もっと本格的にやるためサーバ欲しい」と上司に相談しましょう。

  15. 15

  16. 16

  17. 17

  18. 18

  19. 19

  20. 上(赤色)側が多い=危険 下(緑色)側が多い=良好 Kibana3だと範囲1つ1つに別のクエリを作成しなければいけなかったが Kibana4は1つのクエリで特定の値を範囲別に分類してくれるようになった! 20

  21. 21

  22. 22

  23. 25%までは 123.96ミリ秒以内に完了 50%までは 577.5ミリ秒以内に完了 23 95%は X,XXXミリ秒以内に完了

  24. 24

  25. 25

  26. • • • 26 4~5時間/月⇛十数分/月 使われてない機能の改善や廃止を提案 データにもとづいてるのでお客様も納得 発見したボトルネックを次々つぶして システム全体のレスポンス30%向上

  27. • • 27

  28. • • • 28