さくらのクラウドでつくるCloudNative Daysのオブザーバビリティ基盤

CloudNative Daysのオブザーバビリティチームが、さくらのクラウド上にGrafana・Prometheus・Loki・OpenTelemetryなどを用いて構築した監視・可視化基盤の構成と、コミュニティ運営における「運用負担対効果」の考え方を紹介します。

Transcript

1. 岡本 泰典 株式会社プレイド @taisuke_bigbaby さくらのクラウドでつくる CloudNative Daysの オブザーバビリティ基盤 Co-Chair / Observability Team Leader
2. CloudNative Days実行委員会メンバー 岡本泰典（株式会社プレイド） 　Grafana Meetup Japan オーガナイザー @taisuke_bigbaby Developer Experience & Performance Teamに所属。 Kubernetes基盤やCI/CDパイプラインの構築・改善を通じて、全社的な 開発者体験向上と生産性改善を推進。 また、行動分析に特化したOLAPデータベースの開発に参画しペタバイト級 データの高速処理を実現する分散処理基盤の設計・実装を手がける。 Observabilityチームのリーダーも牽引しておりカンファレンスメトリクス の可視化などに努める。
3. 3 CloudNative Daysはクラウドネイティブムーブメントを牽引することを目的とした テックカンファレンスです。 参加者がクラウドネイティブ技術を適切に選択し、活用し、次のステップに進む手助けを 目指しています。 最新の活用事例や先進的なアーキテクチャを学べるセッションに加え、 ハンズオンやディスカッションの場を通じて、初心者から熟練者までが共に成長できる機会 を提供します。 CloudNative Daysとは 初開催: 2018年 / 開催回数: 19回
4. CloudNative Days実行委員会 チーム紹介 Dreamkast Broadcast Observability Promotion Secretariat Contents Creators Hands-On
5. サクッとおさらい！ 5
6. あらためて、オブザーバビリティってなに？ 『メトリクス・ログ・トレースでシステムの状態を把握すること』 → じゃあ、カンファレンスのオブザーバビリティって？？ • 参加者数、セッション視聴数、CFP応募数... • 配信基盤の稼働状況、レスポンスタイム... • SNSの盛り上がり... 「実行委員内外問わず、ありとあらゆるものを計測可能にしたい」 6
7. さくらのクラウド上のオブザーバビリティ基盤 7
8. アプリケーション ログ 現在のオブザーバビリティ基盤の構成 8 リアルタイム/日時 カンファレンスメトリクス Dreamkast Exporter エラートラッキング パフォーマンス 参加者 開発者
9. 各コンポーネントの役割と使い分け • Loki, Prometheus ◦ 参加者へのカンファレンスメトリクス ◦ 配信基盤(以下、Dreamkast)のログ • OpenTelemetry ◦ Observabilityチームが管理しているサーバーの計装 ◦ Dreamkastの計装 • Grafana ◦ 参加者向けのカンファレンスメトリクスを可視化したダッシュボードを公開 ◦ Dreamkastのログの可視化 • Mackerel ◦ オブザーバビリティチームの基盤の監視 ◦ Dreamkastの監視 9
10. さくらのクラウドをコードで管理する (= IaC) • Terraformを活用 ◦ 公式のプロバイダーを公開してくれているので、そちらを使用して管理 • はじめて利用する方へ ◦ fake_mode を利用するのがおすすめ！ ▪ クラウド上のリソースを作成せずにAPIの挙動をシミュレート可能 10 「そう言えば、最近v3が出たな。早く移行しないと.....」
11. 意外とシンプルな構成じゃない？？ 「費用対効果」もあるけど「運用負担対効果」 • コミュニティの作業はフルタイムではない • 限られた時間の中で、価値を提供しなければならない ここに辿り着くまでに色々あった... • APMの自前運用 • カンファレンス当日の運用基盤の障害 etc... 【教訓】 「自分たちで全部やる」のではなく「頼れるものは頼る」ことで持続可能に 11
12. 今日お話ししたオブザーバビリティ基盤は、さくらインターネット様の ツールスポンサーとしての提供によって支えられています。 あらためて、感謝申し上げます。 まとめ 12 支援を受ける 技術を実践する 成果を共有・還元する
13. ありがとうございました！ 13