Next’24 BigQuery recap

by hanzawa.yuya

Slide 1

Slide 1 text

Next’24 BigQuery recap    2024-04-16  データアナリティクス事業本部    半澤祐也  1

Slide 2

Slide 2 text

2 目次 ● 自己紹介 ● これまでのBigQuery ● これからのBigQuery ● 総評

Slide 3

Slide 3 text

3 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評

Slide 4

Slide 4 text

● 半澤祐也（ハンザワユウヤ） ○ データアナリティクス事業本部 ○ インテグレーション部 ○ Google Cloud データエンジニア ● 上位資格は全て取得済み ● Google Cloud Partner Top Engineer 2024に選出 4 自己紹介

Slide 5

Slide 5 text

5 自己紹介 ● BigQueryを中心に最新のアップデート情報や案件等で触った内容を執筆 ● Next’ 24でも最新情報のブログを執筆

Slide 6

Slide 6 text

6 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評

Slide 7

Slide 7 text

7 これまでのBigQuery 最近のBigQueryを一言で表すなら... 1⃣ 他クラウドを含む様々なデータソースからデータを取得可能に 2⃣ 取得したデータをあらゆる方法で取り扱うことが可能に

Slide 8

Slide 8 text

8 これまでのBigQuery 1⃣ 他クラウドを含む様々なデータソースからデータを取得可能に ● Google Cloudの各データベースサービスから他クラウドのオブジェクトストレージまで幅広いデータソースからデータを取得することが可能 ● さらに画像や動画、音声などの非構造化データも取得することが可能

Slide 9

Slide 9 text

9 これまでのBigQuery 2⃣ 取得したデータをあらゆる方法で取り扱うことが可能に ● 取得したデータを各ロールのニーズに併せた方法で扱うことが可能 ● ほぼBigQuery Studioだけで一元管理することが可能

Slide 10

Slide 10 text

10 結論 BigQuery Studioだけで何でもできちゃう！

Slide 11

Slide 11 text

11 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評

Slide 12

Slide 12 text

12 ※ 注意 Next ’24で発表されたほとんどのアップデートはリリースノートやドキュメントに更新されておりません。ご注意ください！！

Slide 13

Slide 13 text

13 これからのBigQuery 　　まず大きなアップデートは...

Slide 14

Slide 14 text

14 これからのBigQuery Gemini in BigQuery！！

Slide 15

Slide 15 text

15 Gemini in BigQuery とは Gemini と BigQuery が統合したデータ基盤プラットフォーム

Slide 16

Slide 16 text

16 Gemini in BigQuery とはどんなことができるようになるのか...？

Slide 17

Slide 17 text

17 Gemini in BigQuery とは Gemini in BigQueryでできるようになること ● data insights によるデータ探索とデータカタログと自然言語によるテーブルの検索 ● Help me code によるSQLとPythonの生成・補完・解析 ● これら機能をキャンパス形式で扱う Bigquery Data Canvas ● パーティショニング、クラスタリングおよびマテリアライズドビューの推奨によるデータワークロードの最適化の提案などなど、今後も増えてく？

Slide 18

Slide 18 text

18 data insights / Help me code とは - Help me code（Preview） Gemini版 GitHub Copilot - data insights（Preview） Data Profilingの結果に基づいたクエリを生成するパターンの発見、データ品質の評価などを自動で行うことが可能に

Slide 19

Slide 19 text

19 BigQuery Data Canvas とは ● メタデータをベースにした自然言語によるテーブルの検索 ● さらに自然言語によるクエリの生成から可視化まで行える ● これら一連の流れをDAGで制御可能 BigQuery Data CanvasもPreview （もちろん自分でクエリを書いても OK）

Slide 20

Slide 20 text

20 Geminiでどう変わるか - ほとんどのユーザーやサービスで生成AIを活用するケースが増えていくと思われる - それに伴って、生産性が向上していく？

Slide 21

Slide 21 text

21 え？生成AIだけ？安心してください！他のアップデートも沢山あります！（Next’24の初日はこれ以外のアップデート情報がほぼなかったので現地で絶望してました）

Slide 22

Slide 22 text

22 他のアップデート赤はGA 青はPreview 他にもまだまだあるはず ...

Slide 23

Slide 23 text

23 BigQuery continuous queries

Slide 24

Slide 24 text

24 BigQuery continuous queries

Slide 25

Slide 25 text

25 BigQuery continuous queries

Slide 26

Slide 26 text

26 BigQuery continuous queries

Slide 27

Slide 27 text

27 BigQuery continuous queries BigQuery continuous queries面白そう！！  利用可能になったらすぐに触ってみたいと思ってます！！  （セッションでは今年の夏にプレビューになると言っていた気がします...！）

Slide 28

Slide 28 text

28 データガバナンス系また、データガバナンス系のサービスにも沢山のアップデート情報がありました！！

Slide 29

Slide 29 text

29 データガバナンス系 GA - Data Profiling - Automatic Data Quality - Data Lineage Preview - Governance Rules - Column-level Data Lineage メタデータを整備することが重要になってくる！

Slide 30

Slide 30 text

30 目次 • 自己紹介 • これまでのBigQuery • これからのBigQuery • 総評

Slide 31

Slide 31 text

31 総評生成AI関連のアップデートが盛り沢山でした

Slide 32

Slide 32 text

32 総評その一方で生成AIを支えるために多くのサービスが追加されていたと思います！

Slide 33

Slide 33 text

33 総評今後のアップデートにも期待です！！ BigQuery omniの東京リージョンサポートはまだですか？？