Preise für Dataplex Universal Catalog

Die Preise für Dataplex Universal Catalog basieren auf der „Pay as you go“-Nutzung. Dataplex Universal Catalog wird derzeit auf der Grundlage der folgenden SKUs abgerechnet:

  • Dataplex Universal Catalog-Verarbeitung (Standard und Premium)
  • Dataplex Universal Catalog Shuffle Storage
  • Metadatenspeicher
  • Data Catalog API-Aufrufe

Im Folgenden finden Sie eine allgemeine Übersicht über die Abrechnung der wichtigsten Funktionen von Dataplex Universal Catalog:

Leistungsvermögen Dataplex Universal Catalog-Verarbeitung Dataplex Universal Catalog Shuffle-Speicher Metadatenspeicher
Cloud Storage-Metadaten erfassen Standard – –
Workbench für die Datenexploration Premium Ja –
Data Lineage Premium – Ja
Datenqualität Premium – Ja, wenn sie in Data Catalog veröffentlicht wurden
Datenprofiling Premium – Ja, wenn sie in Data Catalog veröffentlicht wurden
Metadaten im Dataplex Universal Catalog anreichern – – Ja
Metadaten in Data Catalog anreichern – – Ja

Zusätzlich zu dieser Abrechnung werden Data Catalog API-Aufrufe basierend auf den Data Catalog API-Gebühren abgerechnet.

Andere Verwendungen

Funktionen zur Datenorganisation in Dataplex Universal Catalog (Einrichtung von Lake, Zone oder Asset) sowie die Anwendung und Weitergabe von Sicherheitsrichtlinien sind kostenlos.

Außerdem lösen einige Funktionen von Dataplex Universal Catalog (einschließlich geplanter Datenqualitäts- und Datenaufnahmetasks sowie von Dataplex Universal Catalog verwalteter Connectors für die Aufnahme von Metadaten aus CloudSQL und Looker) die Jobausführung mit Google Cloud Serverless for Apache Spark, BigQuery, Dataflow und Cloud Scheduler aus. Diese Nutzung wird gemäß den jeweiligen Preismodellen von Dataproc, BigQuery, Dataflow und Cloud Scheduler berechnet. Die Kosten werden unter Dataproc, BigQuery und Dataflow aufgeführt, nicht unter Dataplex Universal Catalog.

Preise für die Verarbeitung im Dataplex Universal Catalog

Die Standard- und Premiumverarbeitung im Dataplex Universal Catalog wird nach Data Compute Unit (DCU) abgerechnet. Die DCU-Stunde ist eine abstrakte Abrechnungseinheit für Dataplex Universal Catalog. Die tatsächliche Messung hängt von den einzelnen Funktionen ab, die Sie verwenden.

Preise für die Standardverarbeitung von Dataplex Universal Catalog

Die Standardstufe des Dataplex Universal Catalog umfasst die Funktion zur Datenerkennung, mit der Metadaten in von Dataplex Universal Catalog verwalteten Daten erkannt werden. Die Preise sind je nach Region unterschiedlich.

Dataplex Universal Catalog-Stufe „Kostenlos“

Im Rahmen der kostenlosen Stufe von Google Cloud bietet Dataplex Universal Catalog einige Ressourcen bis zu einem bestimmten Limit kostenlos an. Diese kostenlosen Nutzungskontingente sind während des kostenlosen Testzeitraums und auch danach verfügbar. Wenn Sie die Nutzungskontingente überschreiten und der kostenlose Testzeitraum verstrichen ist, fallen Gebühren gemäß der Preisliste an.

Ressource Monatliche Limits für kostenlose Nutzung
Dataplex Universal Catalog-Verarbeitung 100 DCU-Stunden

Preise für die Premium-Verarbeitung von Dataplex Universal Catalog

Die Premium-Verarbeitungsstufe von Dataplex umfasst Datenherkunft, Datenqualität, Datenprofilerstellung und die explorative Workbench.

Die DCU-Gebühren für jedes Feature werden so berechnet:

  • Automatische Datenqualitätsscans:
    • Der DCU-Stundenverbrauch ist proportional zur Verarbeitung, die für die Profilerstellung der Daten und die Berechnung der Datenqualitätsmesswerte erforderlich ist. Die Abrechnung erfolgt sekundengenau mit einer Mindestnutzungsdauer von einer Minute.
    • Die Kosten hängen von der Anzahl der Zeilen, der Anzahl der Spalten, der Menge der gescannten Daten, der Konfiguration der Datenqualitätsregeln, den Partitionierungs- und Clusteringeinstellungen der Tabelle und der Häufigkeit des Scans ab.
    • Es gibt mehrere Möglichkeiten, die Kosten für automatische Datenqualitätsscans zu senken:
    • Wenn Sie die Gebühren für die Datenqualität von anderen Gebühren in der Dataplex Premium-Verarbeitungs-SKU trennen möchten, verwenden Sie im Cloud Billing-Bericht das Label goog-dataplex-workload-type mit dem Wert DATA_QUALITY.
    • Verwenden Sie die folgenden Labels, die im Abrechnungsexport in BigQuery verfügbar sind, um zusammengefasste Gebühren zu filtern:
      • goog-dataplex-datascan-data-source-dataplex-entity
      • goog-dataplex-datascan-data-source-dataplex-lake
      • goog-dataplex-datascan-data-source-dataplex-zone
      • goog-dataplex-datascan-data-source-project
      • goog-dataplex-datascan-data-source-region
      • goog-dataplex-datascan-id
      • goog-dataplex-datascan-job-id
  • Datenprofilscans:
    • Der DCU-Stundenverbrauch ist proportional zur Verarbeitung, die für die Profilerstellung der Daten und die Berechnung der Datenqualitätsmesswerte erforderlich ist. Die Abrechnung erfolgt sekundengenau mit einer Mindestnutzungsdauer von einer Minute.
    • Die Kosten hängen von der Anzahl der Zeilen und Spalten, der Menge der gescannten Daten, den Partitionierungs- und Clustering-Einstellungen der Tabelle sowie der Häufigkeit des Scans ab.
    • Es gibt mehrere Möglichkeiten, die Kosten für Datenprofilscans zu senken:
      • Probenahme
      • Inkrementelle Scans
      • Spaltenfilterung
      • Zeilenfilterung
    • Wenn Sie die Gebühren für die Datenprofilerstellung von anderen Gebühren in der Dataplex Premium-Verarbeitungs-SKU trennen möchten, verwenden Sie im Cloud Billing-Bericht das Label goog-dataplex-workload-type mit dem Wert DATA_PROFILE.
    • Verwenden Sie die folgenden Labels, die im Abrechnungsexport in BigQuery verfügbar sind, um zusammengefasste Gebühren zu filtern:
      • goog-dataplex-datascan-data-source-dataplex-entity
      • goog-dataplex-datascan-data-source-dataplex-lake
      • goog-dataplex-datascan-data-source-dataplex-zone
      • goog-dataplex-datascan-data-source-project
      • goog-dataplex-datascan-data-source-region
      • goog-dataplex-datascan-id
      • goog-dataplex-datascan-job-id
  • Data Lineage:
    • Der DCU-Stundenverbrauch ist proportional zum Aufwand für die automatische Analyse der Datenherkunft.
    • Um die Kosten für die Datenherkunft von anderen Kosten in der Dataplex Premium-Verarbeitungs-SKU zu trennen, verwenden Sie im Cloud Billing-Bericht das Label goog-dataplex-workload-type mit dem Wert LINEAGE.
    • Wenn Sie die Data Lineage API Origin sourceType mit einem anderen Wert als CUSTOM aufrufen, entstehen zusätzliche Kosten.
  • Workbench für die Datenexploration:
    • Die DCU-Stunde wird anhand des Rechenverbrauchs der Sitzung berechnet.

Preisbeispiel für Datenreihen

Nutzer A aktiviert die Daten-Lineage, um die Lineage für BigQuery in seinem Projekt zu verfolgen. Das Projekt befindet sich am Standort „us-central1“. Die Datenherkunft verbraucht in einem Monat 100 DCU-Stunden der Dataplex Premium-Verarbeitung und erzeugt 1 GiB an Datenherkunfts-Metadaten. Die Kosten sind:


100 * $0.089           // 100 DCU-hours of Dataplex Premium processing billed at $0.089 per DCU-hr

+ (1GiB - 1MiB) * $2   // cost of storing 1GiB data lineage metadata excluding 1MiB of free storage per month
  ---
  = $10.9

Preise für Shuffle-Speicher in Dataplex Universal Catalog

Die Preise für den Shuffle-Speicher decken alle Festplattenspeicher ab, die in den Umgebungen angegeben sind, die für die Data Exploration Workbench konfiguriert wurden.

Katalogpreise

In diesem Abschnitt werden die Preise für die Funktionen zur Katalogverwaltung in Dataplex Universal Catalog und Data Catalog beschrieben. Weitere Informationen zu den Unterschieden zwischen Dataplex Universal Catalog und Data Catalog finden Sie unter Dataplex Universal Catalog im Vergleich zu Data Catalog.

Die Gebühren für Dataplex Universal Catalog gelten für den Metadatenspeicher von Dataplex Universal Catalog, einschließlich der für die Datenherkunft gespeicherten Metadaten. Diese Gebühren gelten ab dem 1. August 2024.

Die Data Catalog-Gebühren gelten für den Metadatenspeicher für Data Catalog und API-Aufrufe an die Data Catalog API.

Die Gebühren für den Metadatenspeicher und API-Aufrufe fallen täglich an. Sie können die noch nicht abgerechnete Nutzung in der Google API Console einsehen.

Preise für den Metadatenspeicher

Dataplex Universal Catalog verwendet die SKU für die Metadatenspeicherung, um die Speicherung von Metadaten abzurechnen. Der Metadatenspeicher wird in Gibibyte (GiB) gemessen, wobei 1 GiB 1.073.741.824 Byte beträgt. Dataplex Universal Catalog und Data Catalog messen die durchschnittliche Menge der gespeicherten Metadaten während eines kurzen Zeitintervalls. Für die Abrechnung werden diese Messungen zu einem Monatsdurchschnitt zusammengefasst, der mit der monatlichen Rate multipliziert wird.

Wenn Sie in einer anderen Währung als US-Dollar bezahlen, gelten die Preise, die unter Cloud Platform SKUs für Ihre Währung angegeben sind.

Preise für den Speicher in Dataplex Universal Catalog

Die Gebühren für die Metadatenspeicherung (einschließlich der für Einträge und Aspekte) werden dem Projekt in Rechnung gestellt, in dem die jeweilige Ressource erstellt wurde.

Durchschnittlicher monatlicher Speicherplatz Preis (in $)
Beliebig 2 $ pro GiB und Monat

Wenn eine Ressource in Data Catalog gleichzeitig in Dataplex Universal Catalog verfügbar gemacht wird, wird Ihnen nur eine aktive Instanz dieser Ressource in Rechnung gestellt.

Preise für Data Catalog-Speicher

Durchschnittlicher monatlicher Speicherplatz Preis (in $)
Bis zu 1 MiB Kostenlos
Mehr als 1 MiB 2 $ pro GiB und Monat

Preise für die API

In diesem Abschnitt wird die Preisgestaltung für Dataplex Universal Catalog- und Data Catalog-APIs beschrieben.

Gebühren für die Dataplex Universal Catalog API

Bei der Interaktion mit Dataplex Universal Catalog sind API-Aufrufe für Folgendes kostenlos:

  • Katalogressourcen erstellen und verwalten
  • Lineage-Ressourcen erstellen und verwalten, mit Ausnahme von automatisch erfassten Lineages
  • Katalogsuche

Gebühren für die Data Catalog API

Data Catalog API-Aufrufe werden wie in der folgenden Tabelle beschrieben abgerechnet:

API-Aufrufe Preis (in $)
1 Million pro Monat Kostenlos
Über 1 Million pro Monat 10 $ pro 100.000 API-Aufrufe

Wenn Sie in einer anderen Währung als US-Dollar bezahlen, gelten die Preise, die unter Cloud Platform SKUs für Ihre Währung angegeben sind.

Preisbeispiele für Dataplex Universal Catalog

In diesem Abschnitt finden Sie Beispiele für die Berechnung der Kosten für Dataplex Universal Catalog.

Kleine Aspekte

  • Nutzer A erstellt und wendet kleine Aspekte an (jeweils 1.024 Byte). Für 10 $/Monat kann der Nutzer 5 GiB Metadaten speichern, was ungefähr 5 Mio. Aspekten entspricht. Wenn wir davon ausgehen, dass jede Tabelle einen Aspekt enthält, ergibt sich eine Gesamtzahl von 5 Millionen Tabellen mit Aspekten.

  • Nutzer B erstellt am 10. des Monats 5 Mio. Aspekte mit jeweils 1 KB und löscht die Aspekte am 20. Die Kosten betragen 3,33 $, berechnet als 5 GiB an Daten geteilt durch ein Drittel des Monats:

5 GiB * $2
* 1/3
= $3.33

Große Aspekte

  • Nutzer C erstellt und wendet große Aspekte an (jeweils 10 KB). Für 10 $pro Monat kann der Nutzer 5 GiB Metadaten speichern, was ungefähr 500.000 Aspekten entspricht. Bei einem Aspekt pro Tabelle sind das insgesamt 500.000 Tabellen mit Aspekten.

  • Nutzer D erstellt 10.000 Aspekttypen (z. B. ETL, Data Governance, Data Quality) und wendet große Aspekte (jeweils 10 KB) mit jedem der 10 Aspekttypen an. Für 10 $pro Monat kann der Nutzer 5 GiB Metadaten speichern, was ungefähr 500.000 Aspekten entspricht. Bei 10 Aspekten pro Tabelle sind das insgesamt 50.000 Tabellen mit Aspekten.

Nächste Schritte

Individuelles Angebot einholen

Mit den „Pay as you go“-Preisen von Google Cloud bezahlen Sie nur für die Dienste, die Sie nutzen. Wenden Sie sich an unser Vertriebsteam, wenn Sie ein individuelles Angebot für Ihr Unternehmen erhalten möchten.
Vertrieb kontaktieren