Next’24 BigQuery recap

Transcript

1. Next’24 BigQuery recap
 
 2024-04-16
 データアナリティクス事業本部
 
 半澤 祐也
 1
2. 2 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評
3. 3 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評
4. • 半澤 祐也（ハンザワ ユウヤ） ◦ データアナリティクス事業本部 ◦ インテグレーション部 ◦ Google Cloud データエンジニア • 上位資格は全て取得済み • Google Cloud Partner Top Engineer 2024に選出 4 自己紹介
5. 5 自己紹介 • BigQueryを中心に最新のアップデート 情報や案件等で触った内容を執筆 • Next’ 24でも最新情報のブログを執筆
6. 6 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評
7. 7 これまでのBigQuery 最近のBigQueryを一言で表すなら... 1⃣ 他クラウドを含む様々なデータソースからデータを取得可能に 2⃣ 取得したデータをあらゆる方法で取り扱うことが可能に
8. 8 これまでのBigQuery 1⃣ 他クラウドを含む様々なデータソースからデータを取得可能に • Google Cloudの各データベースサービスか ら他クラウドのオブジェクトストレージまで幅 広いデータソースからデータを取得すること が可能 • さらに画像や動画、音声などの非構造化デー タも取得することが可能
9. 9 これまでのBigQuery 2⃣ 取得したデータをあらゆる方法で取り扱うことが可能に • 取得したデータを各ロールのニーズに併せた 方法で扱うことが可能 • ほぼBigQuery Studioだけで一元管理すること が可能
10. 10 結論 BigQuery Studioだけで何でもできちゃう！
11. 11 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評
12. 12 ※ 注意 Next ’24で発表されたほとんどのアップデートはリリース ノートやドキュメントに更新されておりません。 ご注意ください！！
13. 13 これからのBigQuery 　　まず大きなアップデートは...
14. 14 これからのBigQuery Gemini in BigQuery！！
15. 15 Gemini in BigQuery とは Gemini と BigQuery が統合した データ基盤プラットフォーム
16. 16 Gemini in BigQuery とは どんなことができるようになるのか...？
17. 17 Gemini in BigQuery とは Gemini in BigQueryでできるようになること • data insights によるデータ探索とデータカタログと自然言語によるテーブ ルの検索 • Help me code によるSQLとPythonの生成・補完・解析 • これら機能をキャンパス形式で扱う Bigquery Data Canvas • パーティショニング、クラスタリングおよびマテリアライズドビューの推奨に よるデータワークロードの最適化の提案 などなど、今後も増えてく？
18. 18 data insights / Help me code とは - Help me code（Preview） Gemini版 GitHub Copilot - data insights（Preview） Data Profilingの結果に基づいたクエリを生成する パターンの発見、データ品質の評価などを自動で行うことが可能に
19. 19 BigQuery Data Canvas とは • メタデータをベースにした自然言語によるテーブルの検索 • さらに自然言語によるクエリの生成から可視化まで行える • これら一連の流れをDAGで制御可能 BigQuery Data CanvasもPreview （もちろん自分でクエリを書いても OK）
20. 20 Geminiでどう変わるか - ほとんどのユーザーやサービスで生成AIを活 用するケースが増えていくと思われる - それに伴って、生産性が向上していく？
21. 21 え？生成AIだけ？ 安心してください！ 他のアップデートも沢山あります！ （Next’24の初日はこれ以外のアップデート情報がほぼなかったので現地で絶望してました）
22. 22 他のアップデート 赤はGA 青はPreview 他にもまだまだあるはず ...
23. 23 BigQuery continuous queries
24. 24 BigQuery continuous queries
25. 25 BigQuery continuous queries
26. 26 BigQuery continuous queries
27. 27 BigQuery continuous queries BigQuery continuous queries面白そう！！
 利用可能になったらすぐに触ってみたいと思ってます！！
 （セッションでは今年の夏にプレビューになると言っていた気がします...！）
28. 28 データガバナンス系 また、データガバナンス系のサービスにも 沢山のアップデート情報がありました！！
29. 29 データガバナンス系 GA - Data Profiling - Automatic Data Quality - Data Lineage Preview - Governance Rules - Column-level Data Lineage メタデータを整備することが重要になってくる！
30. 30 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評
31. 31 総評 生成AI関連のアップデートが盛り沢山でした
32. 32 総評 その一方で生成AIを支えるために多くのサービスが追 加されていたと思います！
33. 33 総評 今後のアップデートにも期待です！！ BigQuery omniの東京リージョンサポートはまだですか？？