將 Cloud Storage bucket 附加為 Dataplex Universal Catalog 資產時,Dataplex Universal Catalog 會在相應區域建立發布資料集,發布在 bucket 中探索到的資料表。
本頁說明 Dataplex Universal Catalog 如何將 Cloud Storage 中的單一、雙重和多個區域,對應至 BigQuery 發布資料集。
Cloud Storage 區域對應至 BigQuery 資料集
Dataplex Universal Catalog 的 lake、儲存區和資產是區域資源,可位於一或多個區域。BigQuery 資料集和 Cloud Storage 值區也是地區資源,可位於一或多個地區。
Cloud Storage 和 BigQuery 提供的區域資源有以下差異:
Cloud Storage 和 BigQuery 都支援單一區域資源。
Cloud Storage 具有雙區域,但 BigQuery 沒有。
Cloud Storage 和 BigQuery 都有多區域,但兩者不同。
您可以將 Cloud Storage bucket 和 BigQuery 資料集附加至 Dataplex Universal Catalog 區域或湖泊,做為 Dataplex Universal Catalog 資產。Dataplex Universal Catalog 會自動為附加為資產的 Cloud Storage bucket 建立發布資料集。
Dataplex Universal Catalog 會確保 BigQuery 和 Cloud Storage 區域相符。如果 Dataplex Universal Catalog Lake 的地區與 Cloud Storage bucket 的地區不重疊,您就無法將 bucket 新增至 Lake 的可用區。
如果是單一地區 Cloud Storage bucket,Dataplex Universal Catalog 會在與 bucket 相同的地區建立單一地區發布資料集。
如果 Cloud Storage bucket 位於 Cloud Storage
us
多地區或 Cloud Storageeu
多地區,Dataplex Universal Catalog 會在對應的 BigQueryus
或eu
多地區中建立發布資料集。如果是雙區域 Cloud Storage bucket,Dataplex Universal Catalog 會在與湖泊區域對應的區域中建立發布資料集。將 Cloud Storage bucket 做為資產連結至湖泊時,Dataplex Universal Catalog 會驗證 Cloud Storage bucket 的其中一個資料位置是否與 Dataplex Universal Catalog 湖泊的區域相符。
後續步驟
- 進一步瞭解如何管理湖泊中的資料資產。
- 進一步瞭解如何管理區域。