Precios de Dataplex Universal Catalog

Los precios de Dataplex Universal Catalog se basan en el uso de pago por uso. Actualmente, Dataplex Universal Catalog cobra según los siguientes SKU:

• Procesamiento de Dataplex Universal Catalog (estándar y premium)
• Almacenamiento de barajado de Dataplex Universal Catalog
• Almacenamiento de metadatos
• Llamadas a la API de Data Catalog

A continuación, se muestra una descripción general de alto nivel de cómo se factura cada capacidad clave de Dataplex Universal Catalog:

Además de esta facturación, las llamadas a la API de Data Catalog se facturan según los cargos de la API de Data Catalog.

Otro uso

Las funciones de organización de datos en Dataplex Universal Catalog (configuración de lakes, zonas o recursos) y la aplicación y propagación de políticas de seguridad se proporcionan sin costo.

Además, algunas funcionalidades del Catálogo universal de Dataplex (incluidas las tareas programadas de calidad de datos y transferencia de datos, y los conectores administrados del Catálogo universal de Dataplex para transferir metadatos de Cloud SQL y Looker) activan la ejecución de trabajos con Dataproc Serverless, BigQuery, Dataflow y Cloud Scheduler. El uso se cobra según los modelos de precios de Dataproc, BigQuery, Dataflow y Cloud Scheduler, respectivamente, y los cargos aparecerán en Dataproc, BigQuery y Dataflow en lugar de Dataplex Universal Catalog.

Precios de procesamiento de Dataplex Universal Catalog

El procesamiento estándar y premium de Dataplex Universal Catalog se mide por unidad de procesamiento de datos (DCU). La hora de DCU es una unidad de facturación abstracta para el catálogo universal de Dataplex, y la medición real depende de las funciones individuales que uses.

Precios de procesamiento estándar de Dataplex Universal Catalog

El nivel estándar de Dataplex Universal Catalog abarca la funcionalidad de descubrimiento de datos que descubre metadatos en los datos administrados de Dataplex Universal Catalog. Los siguientes son los precios según la región que elijas.

Nivel gratuito de Dataplex Universal Catalog

Como parte del nivel gratuito de Google Cloud, el Catálogo universal de Dataplex ofrece algunos recursos de forma gratuita hasta un límite específico. Estos límites de uso gratuito están disponibles durante y después del período de prueba gratuita. Si excedes los límites de uso y ya no te encuentras en el período de prueba gratuita, se te cobrará según los precios que se indican en las secciones anteriores.

Precios de procesamiento premium de Dataplex Universal Catalog

El nivel de procesamiento premium de Dataplex abarca el linaje de datos, la calidad de los datos, la generación de perfiles de datos y el espacio de trabajo de exploración de datos.

Los cargos de DCU por cada función se calculan de la siguiente manera:

• Análisis de la calidad de los datos automáticos:
  • El consumo de DCU-hora es proporcional al procesamiento que se realiza para crear perfiles de los datos y calcular las métricas de calidad de los datos. Se factura por segundo, con un mínimo de un minuto.
  • El cargo depende de la cantidad de filas, la cantidad de columnas, la cantidad de datos que escaneaste, la configuración de la regla de calidad de los datos, la configuración de partición y agrupamiento de la tabla y la frecuencia del análisis.
  • Existen varias opciones para reducir el costo de los análisis de calidad de los datos automáticos:
    • Muestreo
    • Análisis incrementales
  • Para separar los cargos de calidad de los datos de otros cargos en el SKU de procesamiento premium de Dataplex, en el informe de facturación de Cloud, usa la etiqueta goog-dataplex-workload-type con el valor DATA_QUALITY.
  • Para filtrar los cargos agregados, usa las siguientes etiquetas disponibles en la exportación de facturación en BigQuery:
    • goog-dataplex-datascan-data-source-dataplex-entity
    • goog-dataplex-datascan-data-source-dataplex-lake
    • goog-dataplex-datascan-data-source-dataplex-zone
    • goog-dataplex-datascan-data-source-project
    • goog-dataplex-datascan-data-source-region
    • goog-dataplex-datascan-id
    • goog-dataplex-datascan-job-id
• Análisis de creación de perfiles de datos:
  • El consumo de DCU-hora es proporcional al procesamiento que se realiza para crear perfiles de los datos y calcular las métricas de calidad de los datos. Se factura por segundo, con un mínimo de un minuto.
  • El cargo depende de la cantidad de filas, columnas, datos analizados, parámetros de partición y clúster en la tabla y la frecuencia del análisis.
  • Hay varias opciones para reducir el costo de los análisis de perfiles de datos:
    • Muestreo
    • Análisis incrementales
    • Filtrado de columnas
    • Filtrado de filas
  • Para separar los cargos de creación de perfiles de datos de otros cargos en el SKU de procesamiento premium de Dataplex, en el informe de facturación de Cloud, usa la etiqueta goog-dataplex-workload-type con el valor DATA_PROFILE.
  • Para filtrar los cargos agregados, usa las siguientes etiquetas disponibles en la exportación de facturación en BigQuery:
    • goog-dataplex-datascan-data-source-dataplex-entity
    • goog-dataplex-datascan-data-source-dataplex-lake
    • goog-dataplex-datascan-data-source-dataplex-zone
    • goog-dataplex-datascan-data-source-project
    • goog-dataplex-datascan-data-source-region
    • goog-dataplex-datascan-id
    • goog-dataplex-datascan-job-id
• Línea de origen de los datos:
  • El consumo de DCU-hora es proporcional al procesamiento involucrado para analizar automáticamente el linaje.
  • Para separar los cargos de linaje de datos de otros cargos en el SKU de procesamiento premium de Dataplex, en el informe de Facturación de Cloud, usa la etiqueta goog-dataplex-workload-type con el valor LINEAGE.
  • Si llamas a la API de Data Lineage Origin sourceType con un valor que no sea CUSTOM, se generan costos adicionales.
• Workbench de exploración de datos:
  • El DCU-hora se calcula en función del consumo de procesamiento de la sesión.

Ejemplo de precios del linaje de datos

El usuario A habilita el linaje de datos para hacer un seguimiento del linaje de BigQuery en su proyecto. El proyecto está en la ubicación us-central1. Durante un mes, el origen de los datos consume 100 horas de DCU de procesamiento de Dataplex Premium y genera 1 GiB de metadatos de origen de los datos. El costo es:

100 * $0.089           // 100 DCU-hours of Dataplex Premium processing billed at $0.089 per DCU-hr

+ (1GiB - 1MiB) * $2   // cost of storing 1GiB data lineage metadata excluding 1MiB of free storage per month
  ---
  = $10.9

Precios de almacenamiento aleatorio de Dataplex Universal Catalog

Los precios de almacenamiento aleatorio cubren cualquier almacenamiento en disco especificado en los entornos configurados para el espacio de trabajo de análisis exploratorios.

Precios del catálogo

En esta sección, se describen los precios del catálogo universal y de Data Catalog. Para obtener más información sobre las diferencias entre el catálogo universal y Data Catalog, consulta Catálogo universal versus Data Catalog.

Los cargos del catálogo universal se aplican al almacenamiento de metadatos para el catálogo universal, incluidos los metadatos almacenados para el linaje de datos. Estos cargos entrarán en vigencia el 1 de agosto de 2024.

Los cargos de Data Catalog se aplican al almacenamiento de metadatos para Data Catalog y a las llamadas a la API que se realizan a la API de Data Catalog.

Los cargos por almacenamiento de metadatos y llamadas a la API se aplican por día. Puedes ver el uso no facturado en Google Cloud console.

Precios de almacenamiento de metadatos

Dataplex Universal Catalog usa el SKU de almacenamiento de metadatos para cobrar por el almacenamiento de metadatos. El almacenamiento de metadatos se mide en gigabytes (GiB), y 1 GiB equivale a 1,073,741,824 bytes. El catálogo universal y Data Catalog miden la cantidad promedio de los metadatos almacenados durante un breve intervalo de tiempo. Para fines de facturación, estas mediciones se combinan en un promedio de un mes, que se multiplica por la tarifa mensual.

Si pagas en una moneda distinta del dólar estadounidense, se aplican los precios que aparecen en tu moneda en SKU de Google Cloud.

Precios de almacenamiento de catálogos universales

Los cargos de almacenamiento de metadatos (incluidos los de entradas y aspectos) se facturan al proyecto en el que se creó el recurso correspondiente.

Cuando un recurso de Data Catalog está disponible simultáneamente en el catálogo universal, solo se te cobrará por una instancia activa de ese recurso.

Precios de almacenamiento de Data Catalog

Precios de las APIs

En esta sección, se describen los precios de las APIs de catálogo universal y Data Catalog.

Cargos de la API del catálogo universal

A medida que los usuarios interactúan con el catálogo universal, las llamadas a la API para lo siguiente no tienen costo:

• Crear y administrar recursos de catálogo universal
• Crear y administrar recursos de linaje, excepto el linaje que se recopila automáticamente
• Búsqueda en el catálogo

Cargos de la API de Data Catalog

Las llamadas a la API de Data Catalog se facturan como se describe en la siguiente tabla:

Si pagas en una moneda distinta del dólar estadounidense, se aplican los precios que aparecen en tu moneda en SKU de Google Cloud.

Ejemplos de precios del catálogo universal

En esta sección, se proporcionan ejemplos de cómo calcular el costo del catálogo universal.

Aspectos pequeños

• El usuario A crea y aplica aspectos pequeños (1,024 bytes cada uno). Por $10 al mes, el usuario puede almacenar 5 GiB de metadatos, que corresponde a alrededor de 5 millones de aspectos. Suponiendo un aspecto por tabla, esto equivale a un total de 5 millones de tablas con aspectos.

• El usuario B crea 5 millones de aspectos de 1 KB cada uno el día 10 del mes y los borra el día 20. El costo es de $3.33, calculado como 5 GiB de datos divididos por un tercio de un mes:

5 GiB * $2
* 1/3
= $3.33

Aspectos grandes

• El usuario C crea y aplica aspectos grandes (10 KB cada uno). Por $10 al mes, el usuario puede almacenar 5 GiB de metadatos, que corresponde a alrededor de 500,000 aspectos. Suponiendo un aspecto por tabla, se trata de un total de 500,000 tablas con aspectos.

• El usuario D crea 10, 000 tipos de aspectos (por ejemplo, ETL, administración de datos y calidad de los datos) y aplica aspectos grandes (10 KB cada uno) con cada uno de los 10 tipos de aspectos. Por $10 al mes, el usuario puede almacenar 5 GiB de metadatos, que corresponde a alrededor de 500,000 aspectos. Suponiendo 10 aspectos por tabla, se trata de un total de 50,000 tablas con aspectos.

¿Qué sigue?

• Lee la documentación del producto: Dataplex Universal Catalog, Data Catalog.
• Comienza a usar Dataplex Universal Catalog.
• Obtén información sobre las soluciones y los casos de uso de Dataplex Universal Catalog.