Upgrade to Pro — share decks privately, control downloads, hide ads and more …

AzureStreamAnalytics_PowerBI

Ryoma Nagata
November 20, 2021

 AzureStreamAnalytics_PowerBI

48th Microsoft Data Platform Day(Online)
「【初級者向け】Azure Stream Analytics × Power BI Real-time Dashboard Report」登壇資料

https://sqlserver.connpass.com/event/216910/

Ryoma Nagata

November 20, 2021
Tweet

More Decks by Ryoma Nagata

Other Decks in Technology

Transcript

  1. 【初級者向け】 Azure Stream Analytics × Power BI Microsoft MVP for

    Data Platform 2021 永田 亮磨 Twitter:@ryomaru0825 Linkedin:ryoma-nagata-0825 Qiita:qiita.com/ryoma-nagata
  2. • デバイスなどから大量に流される時系列データを分析するサービス • 分析条件を使い慣れた SQL で記述 • Power BI やストレージ、DBなど豊富なアウトプットに対応

    What’s Azure Stream Analytics https://docs.microsoft.com/ja-jp/azure/stream-analytics/stream-analytics- introduction クエリ、関数 アウトプット インプット
  3. 注目のUpdate • https://techcommunity.microsoft.com/t5/azure-data-explorer/adx-is-now- supported-as-output-for-azure-stream-analytics-job/ba-p/2923654 • Stream Analytics Jobの出力先としてAzure Data Explorerが選択でき

    るようになりました(Preview) ホットパス: ジョブベース、継続的分析処理 ウォームパス: オンデマンド、インタラクティブ分析処理
  4. • Azure Stream Analytics でのソーシャル メディア分析 ハンズオン MS docsの内容をなるべく簡単に実行できるようにしました。 •

    ryoma-nagata/AzureStreamAnalytics-TwitterDemo (github.com) コードサンプル(デモ資材)の紹介 Power BI Service Microsoft Azure Stream Analytics Event Hub Twitter Client Core application Twitter Realtime Dataset Dashboard/Report 読みとり 送信 クエリ 送信 API利用
  5. • Power BIのAPIに向かってPushすることでデータセットに保持される→可視化可能に なる • いくつかの制限事項あり 参考 • データセットごとに 1

    時間あたり 1,000,000 行追加 • 保持時間制限(ストリーミングの安倍1時間 • SQL Databaseなどをかますパターンもあり(右図 リアルタイムデータセットについて Stream Analytics Realtime Dataset 送信 Stream Analytics Dataset(DirectQuery) 送信 Azure SQL 専用SQL Pool Synapse Link for Cosmos DB クエリ クエリ Dashboard/Report クエリ Dashboard/Report
  6. • Azure Stream Analytics でのソーシャル メディア分析 | Microsoft Docs •

    コード サンプルを参照 | Microsoft Docs • 改めてPower BI データセットのストレージモードについて整理する – Qiita • Power BI Streaming dataflowsの位置づけを整理しつつ試してみる - Qiita 参考リンク