Data Catalog Service 概要 / Data Catalog Service overview

Transcript

1. Oracle Cloud Infrastructure Data Catalog Service 製品技術概要 日本オラクル株式会社
2. • 製品概要 • クリックデモ アジェンダ [Date] Copyright © 2022, Oracle and/or its affiliates 2
3. 3 Copyright © 2022 Oracle and/or its affiliates. 製品概要
4. Oracle Cloud Infrastructure: サービス構成 インフラストラクチャ コンピュート Bare Metal / VM コンテナ K8s, Registry ストレージ Block, File, Object, Archive ネットワーク VCN, LB, VPN FastConnect データ管理 データ管理 GoldenGate Database Migration Data Integration, Catalog データ処理 Data Flow Big Data Autonomous Database Transaction, Data Warehouse データベース Bare Metal, VM Exadata, NoSQL, MySQL, SQL Server アプリケーション開発 サーバーレス Functions, Events API Gateway, Streaming インテグレーション Integration, Apiary アナリティクス Analytics Analytics, Cloud SQL Data Science 開発者 DevOps Low Code Visual Builder Digital Assistant APEX 開発者 Developer API/SDKs Infrastructure as Code Resource Manager Terraform セキュリティ ガバナンス ガバナンス IAM, Policy, Tagging Compartment Cost Analysis セキュリティ IAM, Encryption Vault, DDoS, WAF 監視 Monitoring, Logging Notification, Events, Alarm Copyright © 2022, Oracle and/or its affiliates 4
5. データマネージメントの課題 [Date] Copyright © 2022, Oracle and/or its affiliates 5 分析シナリオに最適なデータ 準備が困難 データ・ガバナンスの管理 が困難 データレイクのデータ把握 が困難 Data Analysts Data Scientists Data Engineers Developers Data Stewards 社内のどのシステムにど のようなデータがあるの? SQLが使えないので 担当者に依頼しなく ては。。。 いろんなデータがあるが、 整理されていない。。。 このデータは誰が 作ったもの？勝手に 使っていいの？ 機密データなのか どうかがわからな い。。。
6. • オンプレミスおよびクラウド上のデータストアのメタ データを収集 • 散在しているデータを論理統合 • データを必要とする誰もが、単一のインタフェース から、専門知識不要でデータを検索 • 無償のサービス Data Catalog Service [Date] Copyright © 2022, Oracle and/or its affiliates 6 Data Catalog Service オンプレミスの データストア クラウドの データストア Data Analysts Data Scientists Data Engineers Developers Data Stewards メタデータの収集 データ検索にSQL、 コマンド、RESTなど の知識不要 全ての人が単一の インタフェースで同 じ方法でデータを 検索
7. • 各データストアのメタデータを収集し、カタログ化 • 対応データストア • Oracle DB、Exadata、MySQL、 PostgreSQL、MS SQL Server、IBM DB2 • Autonomous Database、Azure SQL Database • Apache Hive、Apache Kafka • Object Storage • CSV, XML, ORC, Avro, Parquet, JSON, Excel サポート・データストア [Date] Copyright © 2022, Oracle and/or its affiliates 7 ダッシュボード サポートデータストア(最新情報)とバージョン情報 https://docs.oracle.com/en-us/iaas/data-catalog/using/harvest- technical-metadata.htm
8. Data Catalogの主要機能 [Date] Copyright © 2022, Oracle and/or its affiliates 8 メタデータの収集 • カタログ化したいデータストア(RDBやオブジェクトストレー ジ)を指定し、Data Catalogの中にメタデータを抽出 • データストアの接続情報、認証情報が必要 • 定期的にスケジュール実行可能 データへのタグ付け • データ(テーブル、カラム、ファイルなど)を論理的に識別するため のキーワード(自由書式)を設定 • 特定のキーワードでタグ付けされた全てのデータを検索可能に ビジネス用語 • 組織内で予め決められた用語を使い、データに検索、分類の ための目印を付与 • キーワードはビジネス用語として管理、メンテナンス データの検索 • SQLやRESTではなくキーワードで検索 • テーブル名、カラム名、ファイル名などでデータを検索 • 特定の「タグ」、「ビジネス用語」に合致する全てのデータを 検索可能
9. 9 Copyright © 2022 Oracle and/or its affiliates. クリックデモ
10. デモの流れ [Date] Copyright © 2022, Oracle and/or its affiliates 10 データストアの 登録 メタデータの収 集 タグ、ビジネス 用語の付与 検索
11. デモの流れ [Date] Copyright © 2022, Oracle and/or its affiliates 11 データストアの 登録 メタデータの収 集 タグ、ビジネス 用語の付与 検索
12. ダッシュボード機能
13. データストアの登録
14. データストアの登録
15. データストアの登録
16. データストアの登録
17. データストアの登録
18. データストアの登録
19. データストアの登録
20. データストアの登録
21. データストアの登録
22. データストアの登録
23. データストアの登録
24. データストアの登録
25. データストアの登録
26. データストアの登録
27. データストアの登録
28. データストアの登録
29. データストアの登録
30. デモの流れ [Date] Copyright © 2022, Oracle and/or its affiliates 30 データストアの 登録 メタデータの収 集 タグ、ビジネス 用語の付与 検索
31. メタデータの収集
32. メタデータの収集
33. メタデータの収集
34. メタデータの収集
35. メタデータの収集
36. メタデータの収集
37. メタデータの収集
38. メタデータの収集
39. メタデータの収集
40. メタデータの収集
41. デモの流れ [Date] Copyright © 2022, Oracle and/or its affiliates 41 データストアの 登録 メタデータの収 集 タグ、ビジネス 用語の付与 検索
42. タグ＆ビジネス用語の付与
43. タグ＆ビジネス用語の付与
44. タグ＆ビジネス用語の付与
45. タグ＆ビジネス用語の付与
46. タグ＆ビジネス用語の付与
47. タグ＆ビジネス用語の付与
48. タグ＆ビジネス用語の付与
49. タグ＆ビジネス用語の付与
50. タグ＆ビジネス用語の付与
51. タグ＆ビジネス用語の付与
52. タグ＆ビジネス用語の作成
53. タグ＆ビジネス用語の作成
54. タグ＆ビジネス用語の作成
55. タグ＆ビジネス用語の作成 用語集(Glossary) カテゴリ(Category) 用語(Term)
56. タグ＆ビジネス用語の作成
57. タグ＆ビジネス用語の作成
58. タグ＆ビジネス用語の作成
59. タグ＆ビジネス用語の作成
60. タグ＆ビジネス用語の作成
61. タグ＆ビジネス用語の作成
62. リンクさせるビジネス用語のレコメンド データの画面でレコメンドされるビジネス 用語
63. リンクさせるデータのレコメンド ビジネス用語の画面でレコメンドされる データ
64. デモの流れ [Date] Copyright © 2022, Oracle and/or its affiliates 64 データストアの 登録 メタデータの収 集 タグ、ビジネス 用語の付与 検索
65. タグでの検索
66. タグでの検索
67. 検索
68. 検索
69. 検索
70. 検索
71. 検索
72. 検索
73. 検索
74. ビジネス用語での検索
75. ビジネス用語での検索
76. ビジネス用語での検索
77. タグでの検索(Popular Tags)
78. タグでの検索(Popular Tags)
79. タグでの検索(Popular Tags)