Upgrade to Pro — share decks privately, control downloads, hide ads and more …

ログ集約基盤をCloudWatchからOpenSearchに変えてみた

YouYou
August 02, 2022

 ログ集約基盤をCloudWatchからOpenSearchに変えてみた

YouYou

August 02, 2022
Tweet

More Decks by YouYou

Other Decks in Technology

Transcript

  1. ログ集約基盤をCloudWatchから
    OpenSearchに変えてみた
    1

    View full-size slide

  2. Name:ユータ
    Occupation:SRE
    Twitter:@Y0u281 (オーでなくゼロです)
    ブログ:https://zenn.dev/yuta28
    自己紹介
    Twitter
    2

    View full-size slide

  3. 目次 ● 背景
    ● 実装
    ● 課題
    ● 改善
    ● よかったこと
    ● まとめ
    3

    View full-size slide

  4. 背景
    5
    課題

    ● ログ収集が遅い

    ● 検索しにくい

    ● グラフがほしい


    View full-size slide

  5. 実装
    6
    AWS側でCloudWatchのログを
    OpenSearchに転送してくれる

    View full-size slide

  6. 課題
    7
    すべてのレコードが文字列型で登
    録される!!

    View full-size slide

  7. 改善
    9
    すべてのレコードが文字列型で登
    録される!!

    View full-size slide

  8. 改善
    10
    数値型に変換! Fluentdの設定はブログを
    御覧ください

    View full-size slide

  9. よかったこと
    11
    専用のIAMユーザーを
    発行する必要がなくなった

    View full-size slide

  10. よかったこと
    12
    ステータスコード割合

    View full-size slide

  11. よかったこと
    13
    解決
    ● ほぼリアルタイムで検索
    ● 全文検索で検索性向上
    ● ダッシュボード作成
    ● Google認証で簡単ログイン
    課題

    ● ログ収集が遅い

    ● 検索しにくい

    ● グラフがほしい


    View full-size slide

  12. より詳しい内容は弊社ブログに
    15
    CloudWatch LogsからOpenSearchへログ集
    約を移行した - CUEBiC TEC BLOG
    (hatenablog.com)

    View full-size slide

  13. ありがとうございました
    16

    View full-size slide