En este documento, se enumeran las cuotas que se aplican al Catálogo universal de Dataplex.
Google Cloud usa cuotas para garantizar la equidad y reducir los aumentos repentinos en el uso y la disponibilidad de los recursos. Una cuota restringe la cantidad de un recurso deGoogle Cloud que puede usar tu Google Cloud proyecto. Las cuotas se aplican a una variedad de tipos de recursos, incluidos los componentes de hardware, software y red. Por ejemplo, las cuotas pueden restringir la cantidad de llamadas a la API para un servicio, la cantidad de balanceadores de cargas que se usan en simultáneo en tu proyecto o la cantidad de proyectos que puedes crear. Las cuotas protegen a la comunidad de usuarios deGoogle Cloud mediante la prevención de la sobrecarga de los servicios. También te ayudan a administrar tus propios recursos Google Cloud .
El sistema de cuotas Cloud realiza las siguientes acciones:
- Supervisa el consumo de Google Cloud productos y servicios
- Restringe el consumo de esos recursos.
- Proporciona una forma de solicitar cambios en el valor de la cuota y automatizar los ajustes de la cuota.
En la mayoría de los casos, cuando intentas consumir más de lo que permite la cuota de un recurso, el sistema bloquea el acceso al recurso, y la tarea que intentas realizar falla.
Por lo general, las cuotas se aplican a nivel del proyecto Google Cloud . El uso de un recurso en un proyecto no afecta tu cuota disponible en otro proyecto. Dentro de un proyecto de Google Cloud , las cuotas se comparten entre todas las aplicaciones y direcciones IP.
También existen límites del sistema para los recursos del Catálogo universal de Dataplex. Los límites del sistema no se pueden cambiar.
El Catálogo universal de Dataplex aplica cuotas a la cantidad de solicitudes a la API durante un período específico y a la cantidad de recursos que se pueden crear en un proyecto. Las cuotas te protegen de aumentos repentinos imprevistos del uso y servicios sobrecargados. Obtén más información sobre por qué se aplican las cuotas.
Es posible que tus necesidades de cuota aumenten a medida que uses más el Catálogo universal de Dataplex. Si una cuota es muy baja para satisfacer tus necesidades o esperas un aumento en el uso, puedes solicitar un aumento de cuota de forma proactiva.
Cuotas para solicitudes a la API de Dataplex
La API de Dataplex aplica cuotas para la administración de recursos del catálogo universal de Dataplex y las solicitudes de búsqueda en diferentes niveles, independientemente de su origen. Esto incluye las solicitudes que provienen directamente de las llamadas a la API, las bibliotecas cliente, Google Cloud CLI y la consola de Google Cloud .
Las siguientes cuotas se aplican a las solicitudes de Dataplex Universal Catalog:
| Cuota | Predeterminado |
|---|---|
| Solicitudes de lectura de entradas y aspectos por proyecto, por región y por minuto | 6000 |
| Solicitudes de operaciones de escritura de entradas y aspectos por proyecto por región por minuto | 1500 |
| Solicitudes de lectura de tipos de aspecto, tipos de entrada y grupos de entrada por proyecto, por usuario y por minuto | 100 |
| Solicitudes de lectura de tipos de aspecto, tipos de entrada y grupos de entrada por proyecto por minuto | 200 |
| Solicitudes de escritura de tipos de aspectos, tipos de entradas y grupos de entradas por proyecto, por usuario y por minuto | 10 |
| Solicitudes de escritura de tipos de aspecto, tipos de entrada y grupos de entrada por proyecto por minuto | 20 |
| Solicitudes de búsqueda por proyecto por usuario por minuto | 900 |
| Solicitudes de búsqueda por proyecto por minuto | 1200 |
| Solicitudes de búsqueda por organización por minuto | 2400 |
| Solicitudes de búsqueda por organización por día | 345600 |
| Solicitudes de lectura de trabajos de metadatos por proyecto por región por minuto | 400 |
| Solicitudes de lectura de tareas de metadatos por proyecto, por usuario, por región y por minuto | 200 |
| Solicitudes de escritura para trabajos de metadatos por proyecto por región por minuto | 20 |
| Solicitudes de escritura para trabajos de metadatos por proyecto, por usuario, por región y por minuto | 10 |
| Cantidad de metadatos que exportan los trabajos de exportación de metadatos, por organización y por día | 10 GB |
|
Cantidad de metadatos que se analizan para exportar por trabajos de exportación de metadatos, por organización y por día Esta cuota evalúa el volumen total de metadatos que existe en la organización, los proyectos o los grupos de entradas que están dentro del alcance del trabajo de exportación de metadatos. |
100 GB |
Para cada solicitud del catálogo universal de Dataplex que se indica en la siguiente tabla, la cuota se aplica a nivel de cada proyecto y de cada proyecto por usuario.
| Cuota | Ejemplos |
|---|---|
| Solicitudes de lectura para la administración de recursos | Obtén un lake y enumera las zonas |
| Solicitudes de escritura para la administración de recursos | Crea un lake y borra un activo |
| Cómo obtener solicitudes de metadatos | Cómo obtener una entidad o una partición |
| Lista de solicitudes de metadatos | Cómo enumerar entidades y particiones |
| Cómo escribir solicitudes de metadatos | Actualiza una entidad y borra una partición |
| Solicitudes de lectura para recursos de tareas y trabajos | Cómo obtener una tarea y enumerar trabajos |
| Cómo escribir solicitudes para recursos de tareas y trabajos | Cómo crear una tarea y cancelar un trabajo |
| Configura solicitudes de políticas de IAM | Configura una política de IAM |
Cuotas para solicitudes a la API de Data Lineage
La API de Data Lineage aplica cuotas para lo siguiente:
- Solicitudes de lectura que solo muestran los datos
- Solicitaciones de escritura que crean o cambian los datos
- Crea un linaje abierto
Se aplican las siguientes cuotas a las solicitudes de linaje de datos:
| Cuota | Valor predeterminado |
|---|---|
| Solicitudes de lectura por proyecto, por usuario, por región y por minuto | 1000 |
| Solicitudes de escritura por proyecto, por usuario, por región y por minuto | 6000 |
| Solicitudes de Lineage abiertas por proyecto, por usuario, por región y por minuto | 3000 |
Cuotas de recursos
La cuota de recursos se aplica a nivel de proyecto para los siguientes tipos de recursos: lago, zona, activo, tarea a pedido y tarea recurrente. Puedes verificar el uso actual de la cuota del Catálogo universal de Dataplex en la página Cuotas de la consola de Google Cloud .
Solicita un aumento de la cuota
En la consola de Google Cloud , ve a la página Cuotas.
Selecciona la cuota que deseas modificar.
Haz clic en Más acciones > Editar cuota.
Ingresa el nuevo valor de cuota y una descripción de la solicitud.
Haz clic en Siguiente.
Ingresa los detalles de contacto.
Haz clic en Enviar solicitud.
Para ajustar la mayoría de las cuotas, usa la consola de Google Cloud . Para obtener más información, consulta Solicita un ajuste de cuota.
Dependencias de cuotas
Es posible que tu uso de Dataplex Universal Catalog implique otros Google Cloud productos. Por ejemplo, el descubrimiento de datos requiere invocar las APIs de Cloud Storage o BigQuery para interactuar con los recursos subyacentes. Estos productos tienen cuotas a nivel del proyecto, que incluyen las que se aplican al uso del Catálogo universal de Dataplex.
Páginas de cuotas de otros productos que podrías usar con Dataplex Universal Catalog:
Esta lista no es exhaustiva.
Límites
Se aplican los siguientes límites al Catálogo universal de Dataplex:
| Límite | Valor |
|---|---|
| Tamaño de una solicitud de entrada y aspectos (incluidos los aspectos del esquema) | 2 MB |
| Longitud de un ID de entrada | 4,000 caracteres |
| Longitud de un nombre completamente calificado en una entrada | 4,000 caracteres |
| Es la longitud del nombre visible de la fuente de la entrada en una entrada. | 500 caracteres |
| Es la longitud de la descripción de la fuente de entrada en una entrada. | 2,000 caracteres |
| Es la longitud del recurso de fuente de entrada en una entrada. | 4,000 caracteres |
| Es la longitud del sistema de origen de la entrada en una entrada. | 64 caracteres |
| Es la longitud de la plataforma de origen de la entrada en una entrada. | 64 caracteres |
| Es la longitud de las etiquetas de fuente de entrada en una entrada. | 128 caracteres para cada clave y valor |
| Es el tamaño del contenido JSON en un aspecto (excepto el aspecto del esquema). | 120 KB |
| Tamaño total de una entrada | 5 MB |
| Cantidad máxima de aspectos en una entrada | 10,000 |
| Es la longitud del nombre visible del tipo de entrada, el tipo de aspecto y el grupo de entradas. | 256 |
| Longitud de la descripción del tipo de entrada, el tipo de aspecto y el grupo de entrada | 1024 |
| Longitud del nombre del campo en una plantilla de tipo de aspecto | 63 |
| Cantidad máxima de tipos de aspectos obligatorios en un tipo de entrada | 20 |
| Cantidad máxima de valores de enumeración en una plantilla de tipo de aspecto | 1024 |
| Cantidad máxima de elementos en los resultados de la búsqueda de Dataplex Universal Catalog | 500 |