Azure Function Operation Monitoring

Azure Functionの運用監視についてやったことをご紹介
2019/06/29 Interact 2019
https://interact.connpass.com/event/91059/

Transcript

1. Azure Function Operation monitoring Interact 2019(仮称) 濱本 一慶(Hamamoto Kazunori) 2019/06/29
2. 資料について https://speakerdeck.com/airish9/azure-function-operation-monitoring 資料は以下のサイトで公開済みです。 セッション内容に応じて加筆する予定です。
3. 自己紹介 濱本 一慶（はまもと かずのり） @airish9 (修羅イバー) ▪ シグマコンサルティング株式会社所属 ▪ C# >> python >> php >> VB.NET ▪ Backend > Frontend ▪ 元福岡県民 ▪ うどん >>>> 超えられない壁 >>>> ラーメン ▪ 週末はモータースポーツおじさん ▪ ラブライブ！ 東條希 推し
4. 運用と監視
5. 運用と監視 監視してますか？ 最後の方に取り掛かりがち…
6. 運用と監視 運用監視のポイントは 当たり前の事を当たり前のようにやる 簡単そうだけど とても難しい…
7. 運用と監視 メトリック ログ 監視 運用 Application Operator Monitor
8. 運用と監視 ▪ 運用と監視はセット ▪ 監視する事が目的になってはいけない ▪ 監視は運用するための手段 ▪ 運用しないなら監視しない方がマシ
9. 運用と監視 ▪ ポジティブな監視 ▪ アプリケーションが正常に動いているか ▪ リクエスト数やユーザー数を把握できるか ▪ ネガティブな監視 ▪ 想定外の動作をしていないか ▪ どこで問題が発生しているか ▪ どんな問題が発生しているか ▪ 不正なアクセス等を受けていないか
10. Azure Function Monitoring
11. Azure Functionの監視 ＿＿＿_ ／ ＼ ／ ─ ─＼ ／ （•） （•） ＼ | （__人__） | / ∩ノ ⊃ ／ ( ＼ ／ ＿ノ | | .＼ “ ／＿＿| | ＼ ／＿＿＿ ／ FaaSの監視…？
12. Azure Functionの監視 ▪ 基本的にWeb Appsと同じ ▪ FaaS(Function as a Service) ▪ Serverは管理しなくても良いけど存在する ▪ 存在するからには監視する ▪ Hostも死ぬ時には死ぬ
13. Azure Functionの監視 ＿＿＿_ ／ ＼ ／ ─ ─＼ ／ （•） （•） ＼ | （__人__） | / ∩ノ ⊃ ／ ( ＼ ／ ＿ノ | | .＼ “ ／＿＿| | ＼ ／＿＿＿ ／ 監視サービス使う？
14. Azure Functionの監視 Azure Monitor Application Insights ・Request ・Application Log ・Exception Log Analytics ・Search Log ・Analytics(Kusto)
15. Azure Monitor
16. Application Insights
17. Application Insights ▪ 要求レート、応答時間、およびエラー率 ▪ 依存率、応答時間、およびエラー率 ▪ 例外 ▪ ページ ビュー ▪ 読み込みのパフォーマンス ▪ AJAX calls ▪ ユーザー数とセッション数 ▪ パフォーマンス カウンター ▪ ホスト診断 ▪ トレース ログ ▪ カスタム イベントとメトリック Application Insightsで監視できる項目
18. Log Analytics ▪ MonitorログはLog Analyticsワークスペースへ格納される ▪ Kustoを利用してログ分析 requests | where timestamp >= ago(1h)
19. Let’s Monitoring
20. Let’s Monitoring ∩＿ 〈〈〈 ヽ ＿＿＿_ 〈⊃ } ／⌒ ⌒＼ | | ／（ •） （•）＼ ! ! ／ :::::⌒（__人__）⌒:::::＼| l | |r┬-| | ／ ＼ ｀ ー'´ ／／ / ＿＿ / (＿＿＿） / 監視作れそう
21. Let’s Monitoring 初めはシンプルに作る Simple Complex
22. Demo
23. Demo Monitoring System Azure Monitor Alert Kusto
24. Demo Monitoring System ▪ 通知処理はアプリケーションに組み込まない ▪ 開発者以外でもメンテ＆運用できるようにする ▪ 運用者 ▪ エンドユーザー ▪ Logic Appsで複数の通知に対応できる
25. Azure Monitorのペイロード ▪ 2種類のリクエストが存在する ▪ 各サービスごとの個別スキーマ ▪ 共通アラートスキーマ ▪ https://docs.microsoft.com/ja-jp/azure/azure-monitor/platform/alerts- common-schema-definitions
26. ログアラートの固有ペイロード { "schemaId": "Microsoft.Insights/LogAlert", "data": { "SearchResult": { "tables": [ { "name": "PrimaryResult", "columns": [ ], "rows": [ [ "2019-06-28T16:03:13.9668869Z", "Executed 'Functions.Echo' (Failed, Id=ec585d9c-1620-4f5d-9019-7d07893bb6c4)", 3, <<中略>> ] ] } ], "dataSources": [ ] }, "AlertType": "Number of results" } } Application Insightsで検索した内容が」 rows配列に含まれる
27. 共通ペイロード（抜粋） { "schemaId": "azureMonitorCommonAlertSchema", "data": { "essentials": { }, "alertContext": { "SearchResults": { "tables": [ { "name": "PrimaryResult", "columns": [ ], "rows": [ [ "2019-06-28T16:03:13.9668869Z", "Executed 'Functions.Echo' (Failed, Id=ec585d9c-1620-4f5d-9019-7d07893bb6c4)", 3, "trace" ] ] } ] } } } } Application Insightsで検索した内容が alertContextは以下のrows配列に含まれる
28. Slackの内容にApplication Insightsの内容を含める "queries": { "channel": "hogehoge", "text": "Alertが発生しました。¥nMessage : @{items('row-for')[1]}" } "rows": [ [ "2019-06-28T16:03:13.9668869Z", "Executed 'Functions.Echo' (Failed, Id=ec585d9c-1620-4f5d-9019-7d07893bb6c4)", 3, "trace" ] ] rowsのインデックスと対応する Channel IDを指定する(Private Channelでも可）
29. まとめ ▪ まず、Application Insigths と Azure Monitor を使う ▪ 初めはシンプルな形から構築していく ▪ 運用監視を続ける中で使いやすくカスタマイズしていく
30. ご清聴ありがとうございました