Prezzi del Catalogo universale Dataplex

I prezzi del Catalogo universale Dataplex si basano sull'utilizzo con pagamento a consumo. Attualmente, Dataplex Universal Catalog applica addebiti in base ai seguenti SKU:

• Elaborazione del Catalogo universale Dataplex (standard e premium)
• Spazio di archiviazione shuffle del Catalogo universale Dataplex
• Archiviazione dei metadati
• Chiamate API di Data Catalog

Di seguito è riportata una panoramica di alto livello della modalità di fatturazione di ogni funzionalità chiave del Catalogo universale Dataplex:

Oltre a questa fatturazione, le chiamate API di Data Catalog vengono addebitate in base alle tariffe dell'API Data Catalog.

Altro utilizzo

Le funzionalità di organizzazione dei dati nel Catalogo universale Dataplex (configurazione lake, zona o asset) e l'applicazione e la propagazione delle policy di sicurezza, vengono fornite senza costi.

Inoltre, alcune funzionalità del Catalogo universale Dataplex (tra cui attività pianificate per la qualità dei dati e l'importazione di dati e connettori gestiti del Catalogo universale Dataplex per l'importazione di metadati da CloudSQL e Looker) attivano l'esecuzione del job tramite Dataproc serverless, BigQuery, Dataflow e Cloud Scheduler. Questi utilizzi vengono addebitati secondo i modelli di prezzi di Dataproc, BigQuery, Dataflow e Cloud Scheduler, e gli addebiti verranno visualizzati in Dataproc, BigQuery e Dataflow anziché in Dataplex Universal Catalog.

Prezzi per l'elaborazione del Catalogo universale Dataplex

L'elaborazione del Catalogo universale Dataplex standard e premium viene misurata in unità di calcolo dei dati (DCU). Un'ora DCU è un'unità di fatturazione astratta per il Catalogo universale Dataplex e il monitoraggio effettivo dipende dalle singole funzionalità che utilizzi.

Prezzi dell'elaborazione standard del Catalogo universale Dataplex

Il livello standard del Catalogo universale Dataplex include la funzionalità di rilevamento dei dati che rileva i metadati in tutti i dati gestiti da Catalogo universale Dataplex. Di seguito sono riportati i prezzi in base alla regione scelta.

Livello gratuito di Dataplex Universal Catalog

Nell'ambito di utilizzo del Livello gratuito di Google Cloud, Dataplex Universal Catalog offre alcune risorse gratuitamente entro limiti specifici. Questi limiti di utilizzo gratuito sono disponibili sia durante che dopo il periodo di prova gratuita. Se superi questi limiti di utilizzo e il tuo periodo di prova gratuita è scaduto, ti verranno addebitati i costi previsti, come indicato nelle sezioni precedenti.

Prezzi dell'elaborazione premium del Catalogo universale Dataplex

Il livello di elaborazione premium di Dataplex copre l'origine dei dati, la qualità dei dati, la profilazione dei dati e il workbench per l'esplorazione dei dati.

Gli addebiti di DCU per ogni funzionalità vengono calcolati come segue:

• Scansioni di qualità dei dati automatiche:
  • Il consumo in ore DCU è proporzionale all'elaborazione necessaria per creare il profilo dei dati e calcolare le metriche sulla qualità dei dati. Il costo è addebitato al secondo, con un minimo di un minuto.
  • Il costo dipende dal numero di righe, dal numero di colonne, dalla quantità di dati sottoposti a scansione, dalla configurazione delle regole di qualità dei dati, dalle impostazioni di partizionamento e clustering della tabella e dalla frequenza della scansione.
  • Esistono diverse opzioni per ridurre il costo delle analisi automatiche della qualità dei dati:
    • Campionamento
    • Scansioni incrementali
  • Per separare gli addebiti relativi alla qualità dei dati da altri addebiti nello SKU di elaborazione premium di Dataplex, nel report sulla fatturazione di Cloud, utilizza l'etichetta goog-dataplex-workload-type con il valore DATA_QUALITY.
  • Per filtrare gli addebiti aggregati, utilizza le seguenti etichette disponibili nell'esportazione della fatturazione in BigQuery:
    • goog-dataplex-datascan-data-source-dataplex-entity
    • goog-dataplex-datascan-data-source-dataplex-lake
    • goog-dataplex-datascan-data-source-dataplex-zone
    • goog-dataplex-datascan-data-source-project
    • goog-dataplex-datascan-data-source-region
    • goog-dataplex-datascan-id
    • goog-dataplex-datascan-job-id
• Scansioni Profilo dei dati:
  • Il consumo in ore DCU è proporzionale all'elaborazione necessaria per creare il profilo dei dati e calcolare le metriche sulla qualità dei dati. Il costo è addebitato al secondo, con un minimo di un minuto.
  • Il costo dipende dal numero di righe, dal numero di colonne, dalla quantità di dati analizzati, dalle impostazioni di partizionamento e clustering della tabella e dalla frequenza dell'analisi.
  • Esistono diverse opzioni per ridurre il costo delle analisi della profilatura dei dati:
    • Campionamento
    • Scansioni incrementali
    • Filtraggio delle colonne
    • Filtraggio delle righe
  • Per separare gli addebiti per la profilatura dei dati dagli altri addebiti nello SKU di elaborazione premium di Dataplex, nel report sulla fatturazione Cloud, utilizza l'etichetta goog-dataplex-workload-type con il valore DATA_PROFILE.
  • Per filtrare gli addebiti aggregati, utilizza le seguenti etichette disponibili nell'esportazione della fatturazione in BigQuery:
    • goog-dataplex-datascan-data-source-dataplex-entity
    • goog-dataplex-datascan-data-source-dataplex-lake
    • goog-dataplex-datascan-data-source-dataplex-zone
    • goog-dataplex-datascan-data-source-project
    • goog-dataplex-datascan-data-source-region
    • goog-dataplex-datascan-id
    • goog-dataplex-datascan-job-id
• Linee di discendenza dei dati:
  • Il consumo in ore DCU è proporzionale all'elaborazione necessaria per analizzare automaticamente la linea di discendenza.
  • Per separare gli addebiti relativi alla linea di discendenza dei dati da altri addebiti nello SKU di elaborazione premium di Dataplex, nel report di fatturazione Cloud, utilizza l'etichetta goog-dataplex-workload-type con il valore LINEAGE.
  • Se chiami l'API Data Lineage Origin sourceType con un valore diverso da CUSTOM, si verificano costi aggiuntivi.
• Workbench di esplorazione dei dati:
  • L'ora DCU viene calcolata in base al consumo di computing della sessione.

Esempio di prezzi per la gestione del flusso di dati

L'utente A abilita il monitoraggio del flusso dei dati per BigQuery nel proprio progetto. Il progetto si trova nella località us-central1. Nel corso di un mese, la funzionalità di analisi dei dati utilizza 100 ore di DCU di elaborazione Dataplex Premium e genera 1 GiB di metadati di analisi dei dati. Il costo è:

100 * $0.089           // 100 DCU-hours of Dataplex Premium processing billed at $0.089 per DCU-hr

+ (1GiB - 1MiB) * $2   // cost of storing 1GiB data lineage metadata excluding 1MiB of free storage per month
  ---
  = $10.9

Prezzi dello spazio di archiviazione shuffling del Catalogo universale Dataplex

I prezzi di archiviazione shuffling comprendono qualsiasi spazio di archiviazione su disco specificato negli ambienti configurati per il workbench di esplorazione dei dati.

Prezzi del catalogo

Questa sezione descrive i prezzi di Universal Catalog e Data Catalog. Per ulteriori informazioni sulle differenze tra Catalog universale e Data Catalog, vedi Catalog universale e Data Catalog.

Gli addebiti per il catalogo universale si applicano all'archiviazione dei metadati per il catalogo universale, inclusi i metadati archiviati per la lineage dei dati. Queste tariffe sono valide a partire dal 1° agosto 2024.

Gli addebiti di Data Catalog si applicano all'archiviazione dei metadati per Data Catalog e alle chiamate API effettuate all'API Data Catalog.

I costi di archiviazione dei metadati e delle chiamate API vengono addebitati su base giornaliera. Puoi visualizzare l'utilizzo non fatturato nella Google Cloud console.

Prezzi di archiviazione dei metadati

Il Catalogo universale Dataplex utilizza lo SKU di archiviazione di metadati per addebitare l'archiviazione di metadati. L'archiviazione dei metadati viene misurata in gibibyte (GiB), dove 1 GiB corrisponde a 1.073.741.824 byte. Il Catalogo universale e Data Catalog misurano la quantità media di metadati archiviati in un breve intervallo di tempo. Ai fini della fatturazione, queste misurazioni vengono raggruppate in una media di un mese, moltiplicata per la tariffa mensile.

Se la valuta utilizzata per il pagamento è diversa da USD, si applicano i prezzi elencati nella tua valuta negli SKU di Cloud Platform.

Prezzi di archiviazione del Catalogo universale

Gli addebiti per l'archiviazione dei metadati (incluse le voci e gli aspetti) vengono addebitati al progetto in cui è stata creata la rispettiva risorsa.

Quando una risorsa in Data Catalog viene resa disponibile contemporaneamente nel catalogo universale, ti viene addebitato il costo di una sola istanza attiva di tale risorsa.

Prezzi di archiviazione di Data Catalog

Prezzi delle API

Questa sezione descrive i prezzi delle API universal catalog e Data Catalog.

Addebiti dell'API Catalogo universale

Quando gli utenti interagiscono con il catalogo universale, le chiamate API per le seguenti operazioni sono senza costi:

• Creazione e gestione delle risorse del catalogo universale
• Creazione e gestione delle risorse di lineage, ad eccezione del lineage raccolto automaticamente
• Ricerca nel catalogo

Addebiti dell'API Data Catalog

Le chiamate API di Data Catalog vengono fatturate come descritto nella tabella riportata di seguito:

Se la valuta utilizzata per il pagamento è diversa da USD, si applicano i prezzi elencati nella tua valuta negli SKU di Cloud Platform.

Esempi di prezzi del Catalogo universale

Questa sezione fornisce esempi su come calcolare il costo del catalogo universale.

Aspetti minori

• L'utente A crea e applica aspetti di piccole dimensioni (1024 byte ciascuno). Per 10 $al mese, l'utente può archiviare 5 GiB di metadati, che corrispondono approssimativamente a 5 milioni di aspetti. Supponendo un aspetto per tabella, il totale è di 5 milioni di tabelle con aspetti.

• L'utente B crea 5 milioni di aspetti da 1 kB ciascuno il 10 del mese ed elimina gli aspetti il 20. Il costo è di 3,33 $, calcolato come 5 GiB di dati divisi per un terzo del mese:

5 GiB * $2
* 1/3
= $3.33

Aspetti importanti

• L'utente C crea e applica aspetti di grandi dimensioni (10 KB ciascuno). Per 10 $al mese, l'utente può archiviare 5 GiB di metadati, che corrispondono a circa 500.000 aspetti. Supponendo un aspetto per tabella, il totale è di 500.000 tabelle con aspetti.

• L'utente D crea 10.000 tipi di aspetti (ad esempio ETL, governance dei dati, qualità dei dati) e applica aspetti di grandi dimensioni (10 KB ciascuno) utilizzando ognuno dei 10 tipi di aspetti. Per 10 $al mese, l'utente può archiviare 5 GiB di metadati, che corrispondono a circa 500.000 aspetti. Supponendo 10 aspetti per tabella, si tratta di un totale di 50.000 tabelle con aspetti.

Passaggi successivi

• Leggi la documentazione del prodotto: Dataplex Universal Catalog, Data Catalog.
• Inizia a utilizzare Dataplex Universal Catalog.
• Scopri di più su soluzioni e casi d'uso di Dataplex Universal Catalog.