メッセージング送受信基盤(Kafka)のモニタリングの話 (現場からの学び） / 石井 源一さん

Instanauts_jp #3 (続)みんなInstanaどう使ってる？ ~LT大会~
https://instanautsjp.connpass.com/event/301638/
の登壇資料です。

Transcript

1. 分散ストリーミング基盤(Kafka) のモニタリングの話 (現場からの学び) 日本アイ・ビー・エム株式会社 テクノロジー事業本部 石井 源一
2. 目次 2 1. 自己紹介 2. 案件システムの概要 3. デモ 4. まとめ
3. 2018年 ⽇系IT企業⼊社 通信事業者向けシステム開発 ⾃社クラウドサービス開発 2021年 IBM⼊社 テクノロジーエンジニア ▶1年⽬ 現在 MVP (Minimum Viable Product)開発 による新規事業の価値検証 IBMテクノロジーを使⽤したPoC/デモ開発 ▶4年⽬ ▶現在 Name Interest Department Role ⽯井 源⼀ テクノロジー事業本部 テクノロジーエンジニア 散歩🚶、読書📕、テニス🎾 •Self Introduction
4. 案件システムの概要 構成 ・KakfaによりホストマシンDB を別環境に複製 ・Kafka自身もDR構成用に別リ ージョンに複製 ボクがなんとかできる かもしれません！ ボクやってみます！ お客様 エラーの特定が大変なの では、、？
5. デモ 7
6. デモ手順1 KafkaのWebUIを確認 データの送受信を行う トピックを確認 8 Kafka Kafka 別リージョン
7. デモ手順2 データ送信アプリとデータ受信 アプリにCURLでリクエストを 送る まずはデータ受信アプリにリク エストを送る 9 データ送信 アプリ データ受信 アプリ
8. デモ手順3 まずはデータ受信アプリにリ クエストを送る トピックに入っているデータ を受診したことを確認 10 データ送信 アプリ データ受信 アプリ
9. デモ手順4 データ送信アプリにリクエス トを送る データ送信 アプリ データ受信 アプリ
10. デモ手順5 データ送信アプリから送信し たデータが データ受診アプリから受診で きていることを確認 12 データ送信 アプリ データ受信 アプリ
11. デモ手順6 Kafkaにも送信したデータが入 っていることを確認 13 Kafka Kafka 別リージョン
12. デモ手順7 アプリの依存関係も確認可能 14
13. デモ手順8 先ほどの一連のリクエストを Instanaで確認 データ送受信リクエストは もちろん、データ同期リクエ ストも記録されている
14. デモ手順9 各呼び出しの詳細を確認可能 右側の「詳細」から詳しい情 報が確認できる 呼び出しにエラーが発生して いる場合は、「詳細」にエラ ーメッセージが表示される 16
15. まとめ 複雑なシステムでも Instana Agentを入れるだけで きれいに見えた！ リクエストが可視化されたの で、エラー追跡が容易に なった！ 17 ボク頑張りました！