GCPの Cloud Data Catalog の ドキュメント読んだメモ
GCPでのメタデータ管理用サービスとして超便利。
Data Catalog の概要
フルマネージドでスケーラビリティの高いデータ検出およびメタデータ管理サービス
公式Doc
やれることは2つ
- アクセス可能なデータアセットを検索
- メタデータでアセットにタグ付けする
Cloud Data Catalog の対象データ
- BigQueryのデータセット、テーブル、ビュー
- Cloud Pub/Subトピック
- Cloud Strogeバケット、 Cloud Stroageオブジェクト
- ※ GCSはドキュメントには対象として記述があるが現在DataCatalogの検索対象には入ってない
タグを使って独自のメタデータを適用することも可能
検索と発見
- アセットが存在する元のストレージシステムから提供されるネイティブメタデータ
- 名前や ID などのプロジェクト情報
- アセットの名前と説明
- Google Cloud Platform のリソースラベル
- BigQuery のテーブルとビューのスキーマ名と説明
- アセットに適用したユーザー生成の Cloud Data Catalog メタデータ
- タグ
- マネージド エントリと、マネージド エントリのタグ
Getting started with Data Catalog
- タグの使い方がわかる
- 自分で定義したメタデータがタグとしてデータセットにつけられる
Data Catalog の検索構文
検索方法の詳細。
description: hoge で検索すると説明文のみの検索になるなど。
Author And Source
この問題について(GCPの Cloud Data Catalog の ドキュメント読んだメモ), 我々は、より多くの情報をここで見つけました https://qiita.com/munaita_/items/143492942c3d6f638324著者帰属：元の著者の情報は、元のURLに含まれています。著作権は原作者に属する。
Content is automatically searched and collected through network algorithms . If there is a violation . Please contact us . We will adjust (correct author information ,or delete content ) as soon as possible .