Quotas et limites

Ce document présente les quotas et les limites de Data Catalog.

Un quota limite la quantité d'une ressource Google Cloud partagée particulière que votre projet Google Cloud peut utiliser, y compris les composants matériels, logiciels et réseau. Les quotas font partie d'un système qui effectue les opérations suivantes:

  • Surveille votre utilisation ou votre consommation des produits et services Google Cloud
  • Limite la consommation de ces ressources pour des raisons telles que l'équité et la réduction des pics d'utilisation
  • Gère des configurations qui appliquent automatiquement des restrictions recommandées
  • Fournit un moyen de modifier le quota ou de demander des modifications

Dans la plupart des cas, lorsqu'un quota est dépassé, le système bloque immédiatement l'accès à la ressource Google concernée et la tâche que vous essayez d'effectuer échoue. Dans la plupart des cas, les quotas s'appliquent à chaque projet Google Cloud. Ils sont partagés entre toutes les applications et adresses IP qui utilisent ce projet.

Pour demander une augmentation ou une diminution de certains quotas, utilisez la console Google Cloud. Pour en savoir plus, consultez la section Demander un quota supérieur.

Des limites s'appliquent également aux ressources. Ces limites ne sont pas liées au système de quotas. Sauf indication contraire, les limites ne peuvent pas être modifiées.

Par défaut, les quotas et les limites s'appliquent par projet.

Quotas

Pour calculer le RPM (requêtes par minute) d'une organisation, Data Catalog additionne le RPM des projets de l'organisation.

Data Catalog utilise les quotas de RPM pour éviter la surcharge du service au lieu de contrôler la répartition de la charge de travail des requêtes entre les projets. Par conséquent, le projet et l'organisation disposent des mêmes quotas de RPM par défaut. En d'autres termes, si une organisation possède plusieurs projets et que la charge de travail de l'un d'entre eux approche le quota de l'organisation par défaut (et du même projet), ce projet peut avoir une incidence sur la charge de travail potentielle des autres projets de l'organisation.

Pour ajuster les quotas de l'organisation et du projet séparément, consultez la section Demander une augmentation de quota.

Quota de RPM Valeur par défaut
Lecture 6 000
Écriture 1500
Recherche 1200

Quotas de traçabilité des données

L'API Data Lineage applique des quotas pour les éléments suivants:

  • Requêtes de lecture qui ne renvoient que les données
  • Requêtes d'écriture qui créent ou modifient les données
  • Créer une traçabilité ouverte

L'API Data Lineage applique des quotas de traçabilité des données par projet, par utilisateur et par région. Les quotas par défaut sont les suivants:

Quota de RPM Valeur par défaut
Lire 1000
Écriture 6000
Afficher la traçabilité 3000

Par exemple, vous pouvez envoyer jusqu'à 1 000 requêtes GetProcess par minute dans le projet test-project dans la région us avant de dépasser le quota.

Autres quotas

Limites

L'API Data Catalog applique des limites aux entrées, aux tags et aux métadonnées commerciales.

Limites d'entrée

Limite Valeur
Nombre maximal de groupes d'entrées par organisation pour tous les établissements 10 000
Nombre maximal d'entrées par organisation pour tous les établissements
(les temps de latence des résultats de recherche peuvent augmenter lorsque cette limite est dépassée)
100 M
Nombre maximal d'entrées par groupe d'entrées 100 000
Mo par entrée 10 Mo
Nombre maximal de résultats de recherche par page 1000

Limites de tags

Limite Valeur
Champs par modèle de tag 500
Longueur d'un nom de champ dans un modèle de tag 512 octets
Longueur d'un nom de ressource pour un modèle de balise 512 octets
Longueur d'un champ de chaîne dans un modèle de balise 10 000 octets
Nombre maximal de valeurs d'énumération dans un modèle de tag 100
Nombre maximal de tags par entrée 1000
Somme maximale de deux nombres :
  • Nombre de champs dans tous les tags associés à une entrée
  • Nombre de colonnes dans le schéma facultatif de l'entrée
15 000
Nombre maximal de tags avec stratégie par taxonomie 100
Nombre maximal de taxonomies par projet 40
Profondeur maximale de l'arborescence de tags avec stratégie
(limite toujours applicable : 100 tags avec stratégie par taxonomie)
5
Longueur d'un nom de tag avec stratégie 200 octets
Nombre d'entrées avec une étoile par utilisateur 200

Limites des métadonnées professionnelles

Limite Valeur
Nombre maximal de responsables des données par saisie de données 15
Taille maximale du texte enrichi dans la vue d'ensemble, sans compter la taille des images 100 Ko
Taille totale du texte enrichi, y compris les images 10 Mo