忙しい人むけの FabCon Vienna 2025 KeyNote

https://sqlserver.connpass.com/event/367381/　用資料

Transcript

1. Microsoft MVP for Data Platform 永田 亮磨 (ZEAL CORPORATION) X: @ryomaru0825 Linkedin: ryoma-nagata-0825 Qiita: ryoma-nagata 忙しい人むけの FabCon Vienna 2025 KeyNote
2. 自己紹介 永田 亮磨(Ryoma Nagata) • Microsoft MVP for Data Platform • Databricks Solutions Architect Champion • 株式会社ジール • Microsoft Data Analytics Solution の導入など • 主な活動場所 • Qiita : @ryoma-nagata • X（Twitter） : @ryomaru0825 • connpass : • JSSUG (Japan SQL Server User Group) • JEDAI - The Data & AI Meetup 推しサービス(≒守備範囲） Databricks / Power BI / Machine Learning PurviewDG / Microsoft Fabric
3. お品書き  FabCon Vienna の発表内容をピックアップ  Day 1 Key Note: Microsoft Fabric: The Data Platform for the AI Frontier - YouTube  Day 2 Key Note: Exploring the Fabric Ecosystem: Databases, Security, and AI at Scale  新着情報- マイクロソフトファブリック|Microsoft Learn
4. Developer Experience
5. Fabric MCP https://youtu.be/IryMPbSsv10?si=fyoIAzvL8_ar1rJd&t=1731  アイテムの作成、管理を AI クライアントに 実行させる MCP サーバーが プレビュー  mcp/servers/Fabric.Mcp.Server at main · microsoft/mcp  Fabric MCP の紹介 (プレビュー) |Microsoft Fabric ブログ |マイクロソフト ファブリック
6. CI/CD フルサポート https://youtu.be/IryMPbSsv10?si=yfVcGuUHK-Aq7xr-&t=1833  Git による管理、デプロイパイプラインでのリ リースに 全てのアイテムが対応
7. 開発者向けの マルチタスク UI https://youtu.be/IryMPbSsv10?si=u-Bfh0RKkTpjWLpw&t=2220  複数のワークスぺース間のアイテムの移動 を簡素化  ワークスペースフォルダも反映  現プレビューではFabric スイッチャーのみ  ワークフローの強化: Fabric に導入される 新しいマルチタスク機能 (プレビュー) |Microsoft Fabric ブログ |Microsoft Fabric
8. 開発者向けの マルチタスク UI https://youtu.be/IryMPbSsv10?si=u-Bfh0RKkTpjWLpw&t=2220  複数のワークスぺース間のアイテムの移動 を簡素化  ワークスペースフォルダも反映  現プレビューではFabric スイッチャーのみ
9. Analytics
10. 環境 (アイテム)の 改善 https://youtu.be/IryMPbSsv10?si=4OYt4Afp9qsTCVKE&t=2326  ライブラリ、Spark Conf などの Spark コ ンピューティング環境を定義するアイテムの 改善  カスタムライブラリ利用時の起動時間増加 を低減
11. Fabric Runtime 2.0 の発表 https://youtu.be/IryMPbSsv10?si=YjEmpZA1xQmZjJxq&t=2356  Spark 4.0 、 Delta Lake 4.0 をベースに した Fabric Runtime 2.0 （現 1.3 ）  Fabric での Apache Spark ランタイム ライフサイクル - Microsoft Fabric |Microsoft ラーニング  Spark 4.0 の主なポイント  移行ガイド - Spark 4.0.1 ドキュメント  ANSI SQL モードがデフォルト  Databricks Runtime での ANSI 準拠 - Azure Databricks - Databricks SQL | Microsoft Learn  spark.sql.legacy.parquet.int96RebaseModeInWrite などの日付 変換構成に変更  Delta Lake 4.0  Delta Lake 4.0 プレビュー |デルタ湖  Variant 列、ID列などの機能拡張
12. Materialized Lake View のアップデート https://youtu.be/IryMPbSsv10?si=xP7AMJ_LbBxR3-XO&t=2381  品質定義、加工処理を宣言型で記述す るデータエンジニアリング機能の更新  増分更新や、ネイティブエグゼキューション エンジンへの対応による性能改善  PySpark での記述にも対応
13. Data Wrangler の AI 関数 https://youtu.be/IryMPbSsv10?si=3e6Hb-YQamRoTryZ&t=2420  ローコードで Pandas 処理を記述できる Data Wrangler に AI 関数が搭載  感情分析などの AI 処理をボタンクリック で適用  Data Wrangler の AI 関数によるデータ 変換の高速化 (プレビュー) |Microsoft Fabric ブログ |マイクロソフトファブリック
14. データエンジニアリング のその他の発表 https://youtu.be/IryMPbSsv10?si=jskAjmCiZ19vEByr&t=2453
15. データウェアハウスの性能は大きく改善 https://youtu.be/IryMPbSsv10?si=AmCA9Q0YwT4-X9W2&t=2499 Fabric Data Warehouseへようこそ |Microsoft Fabric ブログ |マイクロソ フトファブリック
16. Fabric ウェアハウスへの移行アシスタントの一般提供 https://youtu.be/IryMPbSsv10?si=kp3hY4Jm_EMwTWHm&t=2531  Azure Synapse の専用 SQL Pool から Fabric に移行するためのアシスタントが 一般提供  DacPacを解析し、DDLを Fabric 準拠 に変換  Copilot により、修正を支援  Fabric Data Warehouse 用 Migration Assistant - Microsoft Fabric | Microsoft Learn  利用可能 – ガイド: Fabric Data Warehouse への移行 |Microsoft Fabric ブログ |マイクロソフトファブリック
17. Graphs in Fabric https://youtu.be/IryMPbSsv10?si=PDrnS5wLIwOYne4c&t=2559  OneLake 上に存在するテーブルから プロパティグラフを構築する  グラフによる分析ユースケース  つながり分析  レコメンデーション  不正検知  経路探索 など  Neo4j-Top-Use-Cases-JP.pdf  グラフへのクエリはローコードまたは Copilot でも可能 デモ
18. リアルタイム異常検出 https://youtu.be/IryMPbSsv10?si=sCa7pO2_-VrlUZ8e&t=3153  時系列データを解析し、異常を検出する モデルを適用する  解析対象のデータを選択して、解析が完 了したら推奨される異常検出モデルを選 択する  選択できる異常検出モデル  Real-Time インテリジェンスにおける異常検出モデルの仕様 - Microsoft Fabric | Microsoft Learn  異常検出機能を備えた AI を活用したリアルタイム インテリジェンス (プ レビュー) |Microsoft Fabric ブログ |マイクロソフトファブリック
19. Maps in Fabric  Power BI でも採用されていた Azure Maps をベースに 地理情報をリアルタイムで可視化するこ とに特化した可視化機能  マップを作成する - Microsoft Fabric | Microsoft Learn  Microsoft Fabric のマップ – リアルタイ ム運用のための地理空間分析情報 |Microsoft Fabric ブログ |マイクロソフト ファブリック https://youtu.be/IryMPbSsv10?si=sFUT2FSWIFCT5MGY&t=5576
20. Real-time Intelligence のその他の発表 https://youtu.be/IryMPbSsv10?si=c95tp5y1y02ZCICu&t=3215  AI主導の運用を強化するための基 盤:Fabricのリアルタイムインテリジェンス |Microsoft Fabric ブログ |マイクロソフト ファブリック
21. Databases
22. Translytical Task Flows Demo https://youtu.be/IryMPbSsv10?si=k_T85FN713ATp9B2&t=3375  BIレポートからデータベースにデータを反映 する Write-back のシナリオに対応すル 機能  トランスライティカルなタスクフローを理解する - Power BI | Microsoft Learn  https://youtu.be/voM47CcPa9s?si=SoC65qXO6cFJXp0X  AI を活用したデモ
23. Databases のその他の発表 https://youtu.be/IryMPbSsv10?si=Vf-IlZTOG-ftOicG&t=3646  Fabric SQL Database のメモリ消費メト リック |Microsoft Fabric ブログ |マイク ロソフトファブリック  Microsoft Fabric でのエンタープライズ 対応 SQL データベースのロック解除: ALM、バックアップ、Copilot など |Microsoft Fabric ブログ |マイクロソフト ファブリック
24. Data Factory
25. Dataflow Gen 2 の性能改善デモ https://youtu.be/IryMPbSsv10?si=12zsiF92CrKULGcF&t=3855  モダン クエリ評価エンジン と、パーティショ ン分割で動作するコンピューティングによる 大幅な性能改善  CI/CD を使用したデータフロー Gen2 の最新エバリュエーター (プレビュー) - Microsoft Fabric | Microsoft Learn  Dataflow Gen2 でパーティション分割されたコンピューティングを使用す る (プレビュー) - Microsoft Fabric | Microsoft Learn   開発時のみ実行されるクエリステップによ る対話型開発体験の向上  Dataflow Gen2 プレビュー専用ステップ - Microsoft Fabric | Microsoft Learn
26. Dataflow Gen 2 のコスト体系の改善 https://youtu.be/IryMPbSsv10?si=7DYAdJkRyR-K4rBb&t=4043  常に 1/4 の減額 に加えて、 10分を越えた処理時間に1/10以上の減 額  Dataflow Gen2 の価格 - Microsoft Fabric |Microsoft Learn
27. Dataflow Gen 2 のその他の発表 https://youtu.be/IryMPbSsv10?si=KcQsDiK0Xf9Y7dj-&t=4092  新しい Dataflow Gen2 のデータ送信先 とエクスペリエンスの改善 |Microsoft Fabric ブログ |マイクロソフトファブリック  Dataflow Gen2 で次世代のデータ変換 を解き放つ – FabCon Europe 2025 の 発表 |Microsoft Fabric ブログ |マイクロ ソフトファブリック  注目：  データフローでのパラメータ・変数ライブラリ  プロンプトによる AI 変換
28. Data Factory の更新  ミッション クリティカルなデータ統合: Fabric Data Factory の新機能 |Microsoft Fabric ブログ |マイクロソフトファブリック  注目：  Workspace ID の適用範囲拡大  ゲートウェイのインストール自動化 PowerShell  Snowflake Key Pair 認証  最新の Fabric Data Factory コネクタのイノベーションによるシームレスなデータ統合の 実現 |Microsoft Fabric ブログ |マイクロソフトファブリック  注目：  パイプラインとコピージョブによるレイクハウス への Upsert  Fabric Data Factory による AI を活用した開発 – Copilot でデータを取り込み、変 換し、理解する |Microsoft Fabric ブログ |マイクロソフトファブリック  注目：Dataflow Gen2 でのカスタム列用の Copilot  Fabric Data Factory で AI 時代のデータ資産を統合 |Microsoft Fabric ブログ |マ イクロソフトファブリック  注目：  Teams / Outlook アクティビティの一般提供  Dataflow Gen2 の AI を活用したデータ変換プロンプト
29. OneLake
30. ミラーリングの対象追加 https://youtu.be/IryMPbSsv10?si=lhsft_fybRAOMR72&t=4181  ミラーリング対象に Oracle 、 Google BigQuery が追加  Microsoft Fabric での Oracle データベースのミラー化 (プレ ビュー) - Microsoft Fabric | Microsoft Learn  Google BigQuery からの Microsoft Fabric ミラー化デー タベース (プレビュー) - Microsoft Fabric | Microsoft Learn  Microsoft Fabric での Google BigQuery のミラーリング (プレビュー) |Microsoft Fabric ブログ |マイクロソフトファブ リック  Microsoft Fabric での Oracle の ミラーリング (プレビュー) |Microsoft Fabric ブログ |マイクロソフトファブ リック  ミラーリング:ゼロETLデータ統合をサ ポートする新しいソースと機能 |Microsoft Fabric ブログ |マイクロ ソフトファブリック
31. Data Agent がミラーリングDB でも利用可能に  ミラーリングを使用して Fabric 外のデータ と対話  データエージェントは Azure AI Foundry , Copilot Studio などの AI アプリケーショ ン用の API として機能する  Microsoft Fabric のミラー データベースか ら Data Agent を介して LLM を利用し たロック解除 |Microsoft Fabric ブログ | マイクロソフトファブリック https://youtu.be/rIfm46St_qc?si=bynUiR16MOC_kqiV&t=3894
32. ショートカット変換の機能拡充  ファイルフォルダに対してショートカットを作 成するだけで実行可能なショートカット変 換に機能追加  ファイル変換：Paquet と json を 追加  AI変換：キーフレーズ抽出などの 追加 https://youtu.be/IryMPbSsv10?si=8fbPjM2X3OVn4xXz&t=4274
33. Table API による相互運用性向上  Iceberg や、Delta Lake などのオープン フォーマットのテーブルのカタログを外部に 公開する  カタログ：データベース内のテーブルの名称とファイルの場所のセット  Overview of OneLake table APIs - Microsoft Fabric | Microsoft Learn  特に Iceberg クライアントはカタログを要 するため、 OneLake 上の Delta -> Iceberg 変換 と併せて他のデータプラットフォームとの相 互運用性を向上させる  外部の Iceberg クライアントはカタログを通じて最新のメタデータファイ ルを理解する  Delta Lake も将来的に Iceberg と同様にカタログベースでのトランザ クション処理が予定されている  Microsoft Fabric OneLake を通じた Delta Lake & Iceberg の相 互運用性 - Speaker Deck https://youtu.be/IryMPbSsv10?si=ZLPUHQgMPKz_ET9t&t=4325 S3 、Oracle 、BigQuery のデータを OneLake を通じて Snowflake に公開するデモ： https://youtu.be/IryMPbSsv10?si=McasvF7E44Z1xpny&t=4358
34. Power BI
35. Power BI セマンティックモデルの Web モデリング GA  Power BI Desktop だけでなく、 Web 上でセマンティックモデルの構築を完結  OneLake 上のテーブル（Direct Lake）に加えて、 OneLake の外側のデータを Import テー ブルとして追加することが可能  Direct Lake × Import を組合せた コンポジットモデルの実現 https://youtu.be/voM47CcPa9s?si=f-_Ndxov5-wcu-t7&t=445 デモ： https://youtu.be/IryMPbSsv10?si=mxRzJwQQnkfKEK5t&t=5035
36. Copilot in Power BI Apps  Power BI アプリに Copilot のページを 追加可能に  Fabric 全体のデータを検索して選択→ 回答する スタンドアロン Copilot との差 別化ポイント： Power BI アプリに含まれるレポートとデー タに基づいて応答する https://youtu.be/IryMPbSsv10?si=qV2ovGpLSCCdFUYq&t=5287 デモ：https://youtu.be/IryMPbSsv10?si=bw2lMZs3O0zheeD8&t=5319
37. Security & Governance
38. OneLake カタログのセキュアタブ  OneLake 上のアクセス権限状況を探索 する UI が追加  ワークスペースロールに所属するユーザーの 一覧  データアクセスロールの一覧、対象ユー ザー、ロール設定の変更  Secure your data - Microsoft Fabric | Microsoft Learn  OneLake カタログでのセキュリティの表 示と管理 (プレビュー) |Microsoft Fabric ブログ |マイクロソフトファブリック https://youtu.be/IryMPbSsv10?si=0VA_wf87X9Lgvr9C&t=4645
39. OneLake の 診断設定  Azure Storage と同様のログ機能を OneLake で提供  Purview 監査で取得しきれなかった OneLake エンジン上のログを出力  Azure Blob Storage の監視デー タ リファレンス | Microsoft Learn https://youtu.be/IryMPbSsv10?si=vh5p6wUYCrrjS7o4&t=4603
40. Fabric network securiry  8月ごろにプレビュー開始されたワークス ペースレベルのネットワーク保護機能が GA  Microsoft Fabric のネットワーク保護の アップデートについて - Speaker Deck  Spark の送信アクセス保護 (一般提供) |Microsoft Fabric ブログ |マイクロソフト ファブリック  Microsoft Fabric のワークスペース レベ ルの Private Link (一般提供) |Microsoft Fabric ブログ |マイクロソフト ファブリック https://youtu.be/voM47CcPa9s?si=f-_Ndxov5-wcu-t7&t=445
41. Purview による Fabric のデータ保護が一般提供に  Purview を使用したファブリック データの 保護 (一般提供) |Microsoft Fabric ブ ログ |マイクロソフトファブリック  DLP for Fabric  機微なデータまたは秘密度ラベルをレイクハ ウスなどから検出・監視し、データの持ち出し による組織外でのアクセスを制限する  Fabric の秘密度ラベルによる保護ポリ シー  秘密度ラベルと連動した組織内でのアクセスポリ シーを適用する  秘密度ラベルは下流にすべて継承される https://youtu.be/rIfm46St_qc?si=YLsZbyW3sFR14qHP&t= 3221
42. OneLake Security によるデータ保護のデモ  クレジットカード番号を保護する構成とし て「秘密度ラベル」「OneLake Security」 を構成  攻撃者はあらゆる方法で表示を試みる デモ https://youtu.be/rIfm46St_qc?si=XAedH_OGK9pT-qLK&t=2748
43. Thank you !