En este documento se indican las cuotas que se aplican a Dataplex Universal Catalog.
Google Cloud usa cuotas para garantizar la equidad y reducir los picos en el uso y la disponibilidad de los recursos. Una cuota restringe la cantidad de unGoogle Cloud recurso que puede usar tu Google Cloud proyecto. Las cuotas se aplican a una serie de tipos de recursos, incluidos los componentes de hardware, software y red. Por ejemplo, las cuotas pueden restringir el número de llamadas a una API enviadas a un servicio, el número de balanceadores de carga que usa tu proyecto de forma simultánea o el número de proyectos que puedes crear. Las cuotas protegen a la comunidad de usuarios deGoogle Cloud al evitar que se sobrecarguen los servicios. Las cuotas también te ayudan a gestionar tus propios Google Cloud recursos.
El sistema de cuotas de Cloud hace lo siguiente:
- Monitoriza tu consumo de Google Cloud productos y servicios
- Restringe el consumo de esos recursos
- Proporciona una forma de solicitar cambios en el valor de la cuota y automatizar los ajustes de la cuota.
En la mayoría de los casos, cuando intentas consumir más recursos de los que permite la cuota, el sistema bloquea el acceso al recurso y la tarea que intentas realizar falla.
Las cuotas se aplican generalmente a nivel de Google Cloud proyecto. El uso que hagas de un recurso en un proyecto no afectará a la cuota disponible en otro proyecto. En un Google Cloud proyecto, las cuotas se comparten entre todas las aplicaciones y direcciones IP.
También hay límites del sistema en los recursos de Dataplex Universal Catalog. Los límites del sistema no se pueden cambiar.
Dataplex Universal Catalog aplica cuotas al número de solicitudes a la API durante un periodo específico y al número de recursos que se pueden crear en un proyecto. Las cuotas te protegen de picos de uso imprevistos y de servicios sobrecargados. Más información sobre por qué se aplican las cuotas
Es posible que tus necesidades de cuota aumenten a medida que uses Dataplex Universal Catalog. Si la cuota de uno de tus proyectos no es suficiente por ser demasiado baja o crees que el uso va a aumentar próximamente, solicita un aumento de la cuota.
Cuotas de solicitudes a la API de Dataplex
La API de Dataplex aplica cuotas a las solicitudes de gestión de recursos y de búsqueda de Dataplex Universal Catalog en diferentes niveles, independientemente de su origen. Esto incluye las solicitudes que se originan directamente de las llamadas a la API, las bibliotecas de cliente, la CLI de Google Cloud y la Google Cloud consola.
Las siguientes cuotas se aplican a las solicitudes de Dataplex Universal Catalog:
| Cuota | Predeterminado |
|---|---|
| Solicitudes de lectura de entradas y aspectos por proyecto, región y minuto | 6000 |
| Solicitudes de escritura de entradas y aspectos por proyecto, región y minuto | 1500 |
| Solicitudes de lectura de tipos de aspectos, tipos de entradas y grupos de entradas por proyecto, usuario y minuto | 100 |
| Solicitudes de lectura de tipos de aspectos, tipos de entradas y grupos de entradas por proyecto y minuto | 200 |
| Solicitudes de escritura de tipos de aspectos, tipos de entradas y grupos de entradas por proyecto, usuario y minuto | 10 |
| Solicitudes de escritura de tipos de aspectos, tipos de entradas y grupos de entradas por proyecto y por minuto | 20 |
| Solicitudes de búsqueda por proyecto, usuario y minuto | 900 |
| Solicitudes de búsqueda por proyecto y minuto | 1200 |
| Solicitudes de búsqueda por organización y minuto | 2400 |
| Solicitudes de búsqueda por organización al día | 345600 |
| Solicitudes de lectura de trabajos de metadatos por proyecto, región y minuto | 400 |
| Solicitudes de lectura de trabajos de metadatos por proyecto, usuario, región y minuto | 200 |
| Solicitudes de escritura de tareas de metadatos por proyecto, región y minuto | 20 |
| Solicitudes de escritura de tareas de metadatos por proyecto, usuario, región y minuto | 10 |
| Cantidad de metadatos que exportan los trabajos de exportación de metadatos por organización y día | 10 GB |
|
Cantidad de metadatos que analizan las tareas de exportación de metadatos para exportar, por organización y día Esta cuota evalúa el volumen total de metadatos que hay en la organización, los proyectos o los grupos de entradas que están incluidos en el ámbito de la tarea de exportación de metadatos. |
100 GB |
Para cada solicitud de Dataplex Universal Catalog que se indica en la siguiente tabla, la cuota se aplica tanto a nivel de proyecto como de proyecto por usuario.
| Cuota | Ejemplos |
|---|---|
| Solicitudes de lectura de gestión de recursos | Obtener un lago, enumerar zonas |
| Solicitudes de escritura de gestión de recursos | Crear un lago, eliminar un recurso |
| Obtener solicitudes de metadatos | Obtener una entidad u obtener una partición |
| Solicitudes de listas de metadatos | Mostrar entidades y particiones |
| Solicitudes de escritura de metadatos | Actualizar una entidad o eliminar una partición |
| Solicitudes de lectura de recursos de tareas y trabajos | Obtener una tarea, enumerar tareas |
| Solicitudes de escritura en los recursos de tareas y trabajos | Crear una tarea o cancelar un trabajo |
| Solicitudes de definición de políticas de gestión de identidades y accesos | Definir una política de gestión de identidades y accesos |
Cuotas de solicitudes a la API Data Lineage
La API Data Lineage aplica cuotas a lo siguiente:
- Solicitudes de lectura que solo devuelven los datos
- Solicitudes de escritura que crean o cambian los datos
- Crear Open Lineage
Las siguientes cuotas se aplican a las solicitudes de linaje de datos:
| Cuota | Valor predeterminado |
|---|---|
| Solicitudes de lectura por proyecto, usuario, región y minuto | 1000 |
| Solicitudes de escritura por proyecto, usuario, región y minuto | 6000 |
| Solicitudes de Open Lineage por proyecto, usuario, región y minuto | 3000 |
Cuotas de recursos
La cuota de recursos se aplica a nivel de proyecto para los siguientes tipos de recursos: lago, zona, recurso, tarea bajo demanda y tarea periódica. Puedes consultar tu uso actual de la cuota de Universal Catalog de Dataplex en la página Cuotas de la Google Cloud consola.
Solicitar un aumento de cuota
En la Google Cloud consola, ve a la página Cuotas.
Selecciona la cuota que quieras modificar.
Haz clic en Más acciones > Editar cuota.
Introduce el nuevo valor de cuota y una descripción de la solicitud.
Haz clic en Siguiente.
Introduce los datos de contacto.
Haz clic en Enviar solicitud.
Para ajustar la mayoría de las cuotas, usa la Google Cloud consola. Para obtener más información, consulta Solicitar un ajuste de cuota.
Dependencias de cuotas
Es posible que el uso de Dataplex Universal Catalog implique otros Google Cloud productos. Por ejemplo, la detección de datos requiere invocar las APIs de Cloud Storage o BigQuery para interactuar con los recursos subyacentes. Estos productos tienen cuotas a nivel de proyecto, lo que incluye aquellas que se aplican al uso de Dataplex Universal Catalog.
Páginas de cuotas de otros productos que puedes usar con Dataplex Universal Catalog:
Esta lista no es exhaustiva.
Límites
Se aplican los siguientes límites a Dataplex Universal Catalog:
| Límite | Valor |
|---|---|
| Tamaño de una solicitud de entrada y aspectos (incluido el aspecto del esquema) | 2 MB |
| Longitud de un ID de entrada | 4000 caracteres |
| Longitud de un nombre completo en una entrada | 4000 caracteres |
| Longitud del nombre visible del origen de la entrada en una entrada | 500 caracteres |
| Longitud de la descripción de la fuente de la entrada en una entrada | 2000 caracteres |
| Longitud del recurso de origen de la entrada en una entrada | 4000 caracteres |
| Longitud del sistema de origen de la entrada en una entrada | 64 caracteres |
| Longitud de la plataforma de origen de la entrada en una entrada | 64 caracteres |
| Longitud de las etiquetas de origen de la entrada en una entrada | 128 caracteres por clave y valor |
| Tamaño del contenido JSON de un aspecto (excepto el aspecto del esquema) | 120 KB |
| Tamaño total de una entrada | 5 MB |
| Número máximo de aspectos en una entrada | 10.000 |
| Longitud del nombre visible del tipo de entrada, el tipo de aspecto y el grupo de entradas | 256 |
| Longitud de la descripción del tipo de entrada, el tipo de aspecto y el grupo de entradas | 1024 |
| Longitud del nombre del campo en una plantilla de tipo de aspecto | 63 |
| Número máximo de tipos de aspectos obligatorios en un tipo de entrada | 20 |
| Número máximo de valores de enumeración en una plantilla de tipo de aspecto | 1024 |
| Número máximo de elementos en los resultados de búsqueda de Dataplex Universal Catalog | 500 |