Filtres de surveillance

Ce guide explique comment configurer des filtres lorsque vous utilisez l'API Monitoring. Vous pouvez utiliser des filtres pour spécifier les ressources surveillées, les types de métriques, les définitions de groupes et les séries temporelles. Vous pouvez également utiliser un filtre pour configurer une règle d'alerte qui surveille les processus exécutés sur vos systèmes. Pour en savoir plus sur ces filtres, consultez la page Filtres d'état de processus.

Avant de commencer

Si vous ne connaissez pas bien les métriques, les séries temporelles et les ressources surveillées, consultez la page Métriques, séries temporelles et ressources.

Si vous ne connaissez pas le fonctionnement des libellés, consultez la section Libellés pour obtenir une présentation.

Utiliser des filtres

Vous pouvez utiliser des filtres dans l'API Monitoring pour effectuer les opérations suivantes :

  • Sélectionner les données de séries temporelles spécifiques qui sont renvoyées par une requête API list. Le filtre peut sélectionner des séries temporelles en fonction du projet, du groupe, des propriétés de ressource surveillée et des propriétés de métrique des données. Pour en savoir plus et obtenir des exemples, consultez la section Récupérer des données de séries temporelles.
  • Attribuer des ressources à un groupe (Group) en fonction des propriétés des ressources et du projet auquel elles appartiennent. Pour obtenir plus d'informations et d'exemples, consultez la section Définir l'appartenance à un groupe.

  • Sélectionner des ressources dans un groupe en fonction de leurs propriétés. Pour obtenir plus d'informations et d'exemples, consultez la section Répertorier les membres d'un groupe.

Sélecteurs de filtres

Un filtre comprend au moins un sélecteur, c'est-à-dire un mot clé de filtre. Les exemples suivants illustrent les différents sélecteurs:

  • project: établit une correspondance lorsque les métriques du projet spécifié sont visibles par le projet de champ d'application d'un champ d'application de métriques mentionné dans le paramètre name.

    Utilisez le sélecteur project lorsqu'un projet Google Cloud peut afficher les métriques de plusieurs projets Google Cloud ou comptes AWS et que vous ne souhaitez afficher les métriques que d'un seul projet. Par exemple, si le champ d'application des métriques pour Project-A inclut Project-B, une correspondance se produit lorsque name a la valeur Project-A et que vous utilisez le filtre suivant:

    project = "Project-B"
  • group: correspond aux ressources appartenant à un groupe ( Group).

    Le filtre suivant correspond au groupe avec l'identifiant group-id:

    group.id = "group-id"
        
  • resource: renvoie les ressources surveillées d'un type particulier ou ayant des valeurs de libellé particulières.

    • Le filtre suivant correspond à toutes les ressources surveillées qui sont des instances de machine virtuelle (VM) Compute Engine:

      resource.type = "gce_instance"
    • Le filtre suivant correspond à toutes les ressources dont la zone commence par europe-:

      resource.labels.zone = starts_with("europe-")
  • metric: renvoie un type de métrique ou une série temporelle spécifique avec un libellé particulier correspondant à une valeur spécifique.

    • Le filtre suivant correspond à un type de métrique spécifique:

      metric.type = "compute.googleapis.com/instance/cpu/usage_time"
    • Le filtre suivant renvoie des séries temporelles associées au libellé instance_name, dont la valeur commence par gke-hipster ou gke-nginx:

      metric.labels.instance_name = monitoring.regex.full_match("gke-(hipster|nginx).*")

Le tableau suivant indique les sélecteurs autorisés dans les filtres en fonction de l'appel de l'API Monitoring :

Objectif du filtre Sélecteur de project Sélecteur de group Sélecteur de resource Sélecteur de metric
Définir des groupes oui oui*
Répertorier les membres d'un groupe Oui Oui
Répertorier les séries temporelles Oui Oui oui oui
Répertorier les descripteurs de statistiques Oui Oui
Répertorier les descripteurs de ressources surveillées oui
* Le sélecteur de ressource comporte des options supplémentaires lorsqu'il est utilisé pour définir l'appartenance à un groupe.
Lorsque vous répertoriez des séries temporelles, vous devez spécifier exactement un type de métrique.

Les sections suivantes présentent des exemples d'utilisations courantes de filtres de surveillance. Pour en savoir plus sur les opérateurs et les objets de filtrage disponibles, consultez la section Syntaxe des filtres.

Récupérer des données de séries temporelles

Méthode : projects.timeSeries.list
Objets de filtrage : project, group.id, resource.type, resource.labels.[KEY], metric.type, metric.labels.[KEY]

Une série temporelle est une liste de points de données horodatés d'un type de métrique issus d'une ressource surveillée spécifique. Pour en savoir plus, consultez la section Modèle de métrique. Le type de métrique est spécifié par un descripteur de métrique, et la ressource surveillée est spécifiée par un descripteur de ressource surveillée.

Le filtre spécifié à la méthode timeSeries.list doit inclure un sélecteur metric, et ce sélecteur ne doit spécifier qu'un seul type de métrique:

  • Pour renvoyer toutes les séries temporelles pour un type de métrique particulier:
    metric.type = "compute.googleapis.com/instance/cpu/usage_time"
    
  • Pour renvoyer toutes les séries temporelles d'un groupe spécifique. Le sélecteur group ne fonctionne qu'avec les données de séries temporelles alignées. Pour en savoir plus, consultez la section Sélecteur de groupe :

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
    group.id = "2468013579"
    
  • Pour renvoyer toutes les séries temporelles d'une instance Compute Engine spécifique, utilisez le filtre suivant:

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
    metric.labels.instance_name = "my-instance-name"
    

  • Pour renvoyer toutes les séries temporelles issues d'instances Compute Engine dont le nom commence par frontend-, utilisez le filtre suivant:

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
    metric.labels.instance_name = starts_with("frontend-")
    

  • Pour renvoyer toutes les séries temporelles issues d'instances Compute Engine dont le nom commence par gke-hipster ou gke-nginx, utilisez le filtre suivant:

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
    metric.labels.instance_name = monitoring.regex.full_match("^gke-(hipster|nginx).*")
    

Définir l'appartenance à un groupe

Méthode : projects.groups
Objets de filtrage : project, resource.type, resource.labels.key, metadata.system_labels.[KEY], metadata.user_labels.[KEY]

Un groupe peut contenir un nombre illimité de ressources, tel que spécifié par un filtre. L'appartenance à un groupe est dynamique. Une ou plusieurs ressources peuvent correspondre au filtre chaque fois qu'il est appliqué. Le paramètre name de l'objet Group spécifie le groupe et le projet de champ d'application d'un champ d'application de métriquesmetrics-scope-concept. Si le sélecteur project est utilisé dans le filtre, il doit spécifier un projet dont les métriques sont visibles par le projet de champ d'application.

+ Pour afficher la liste de toutes les instances de machine virtuelle (VM) Compute Engine en Europe, utilisez le filtre suivant:
resource.type = "gce_instance" AND resource.labels.zone = starts_with("europe-")
    

Répertorier les membres d'un groupe

Méthode : projects.groups.members.list
Objets de filtrage : project, resource.type, resource.labels.[KEY]

Utilisez un filtre pour limiter les membres du groupe que vous récupérez. Le paramètre name spécifie un projet de champ d'application d'un champ d'application des métriques et un groupe défini dans ce projet. Si le sélecteur project est utilisé dans le filtre, il doit spécifier un projet dont les métriques sont visibles par le projet de champ d'application.

  • Pour renvoyer la liste de toutes les ressources de sujet Pub/Sub appartenant au projet my-project, utilisez le filtre suivant:
    project = "my-project" AND resource.type = "pubsub_topic"
    

Répertorier les descripteurs de métriques

Méthode : projects.metricDescriptors.list
Objets de filtrage : project, metric.type

Utilisez un filtre pour limiter les descripteurs de métriques que vous récupérez :

  • Pour ne renvoyer que les descripteurs de métrique Compute Engine, utilisez le filtre suivant:
    metric.type = starts_with("compute.googleapis.com")
    

Pour obtenir la liste complète des types de métriques disponibles, consultez la section Liste des métriques. Pour en savoir plus sur le nommage des métriques, consultez la section Conventions de nommage des métriques.

Répertorier les descripteurs de ressources surveillées

Méthode : projects.monitoredResourceDescriptors.list
Objets de filtrage : resource.type

Utilisez un filtre pour limiter les descripteurs de ressources surveillées que vous récupérez :

  • Pour ne récupérer que les descripteurs de ressources surveillées par Pub/Sub, utilisez le filtre suivant:
    resource.type = starts_with("pubsub")
    

Consultez la page Liste des ressources surveillées pour obtenir la liste complète des types de ressources surveillées définis par Monitoring.

Examples

Dans les exemples de filtrage, nous utilisons le descripteur de métrique, le descripteur de ressource surveillée et l'instance de machine virtuelle suivants, qui ont été simplifiés pour l'illustration :

    # Metric descriptor:
    { "name": "projects/my-project-id/metricDescriptors/compute.googleapis.com%2Finstance%2Fdisk%2Fread_bytes_count"
      "type": "compute.googleapis.com/instance/disk/read_bytes_count",
      "labels": [ { "key": "device_name",
                    "description": "The name of the disk device." } ] }

    # Monitored resource descriptor:
    {  "name": "monitoredResourceDescriptors/gce_instance"
       "type": "gce_instance",
       "labels": [
         { "key": "instance_id",
           "description": "The instance ID provide by Google Compute Engine." },
         { "key": "zone",
           "description": "The Google Cloud Platform zone hosting the instance."
         } ] }

    # Resource descriptor for a virtual machine instance.
    { "type": "gce_instance",
      "instance_id": "1472038649266883453",
      "zone": "us-east-1b",
      "disks": [ "log_partition" ],
      "machine_type": "n1-standard-2",
      "tags": { "environment": "bleeding-edge",
                "role": "frobulator" },
      "project_id": "my-project-id" }

Exemples de récupération de métriques

Pour demander l'utilisation de la bande passante en lecture de disque pour toutes les instances et tous les appareils, définissez un filtre comme suit. Ce filtre renvoie, pour chaque instance, une série temporelle distincte indiquant la bande passante en lecture pour chaque appareil:

metric.type = "compute.googleapis.com/instance/disk/read_bytes_count"

Pour affiner la requête d'interrogation de la bande passante en lecture pour uniquement le disque appelé "log_partition" sur chaque instance, définissez le filtre comme suit. Ce filtre renvoie, pour chaque instance, une série temporelle au maximum, selon qu'un appareil de ce nom existe sur cette instance :

metric.type = "compute.googleapis.com/instance/disk/read_bytes_count" AND
metric.labels.device_name = "log_partition"

Pour limiter la requête à une seule instance, spécifiez cette instance:

resource.type = "gce_instance" AND
resource.labels.instance_id = "1472038649266883453" AND
metric.type = "compute.googleapis.com/instance/disk/read_bytes_count" AND
metric.labels.device_name = "log_partition"

Filtrer avec des groupes

Les exemples suivants illustrent l'utilisation du sélecteur de groupe dans les filtres pour restreindre les ressources surveillées à celles d'un groupe spécifique. Pour en savoir plus sur les sélecteurs utilisés pour définir l'appartenance à un groupe, consultez la section Sélecteur de ressource pour les définitions de groupes.

{ "name": "projects/my-test-project/groups/024681012",
  "display_name": "My Redis Cluster",
  "filter": "metadata.user_labels.role=redis" }

Dans un appel à la méthode projects.timeSeries.list, le filtre suivant demande l'utilisation de la bande passante en lecture de disque pour toutes les instances Compute Engine d'un groupe particulier. Le groupe doit être défini dans le projet de champ d'application d'un champ d'application de métriques spécifié dans le paramètre name de la méthode :

resource.type = "gce_instance" AND
group.id = "024681012" AND
metric.type = "compute.googleapis.com/instance/disk/read_bytes_count"

Référence : syntaxe des filtres

Pour obtenir une présentation des filtres et des exemples, consultez la section Utiliser des filtres.

Un filtre de surveillance est une chaîne composée de quatre types de sélecteurs au maximum :

    <monitoring_filter> ::=  <project_selector> AND
                             <group_selector> AND
                             <resource_selector> AND
                             <metric_selector>

Le filtre correspond à un élément si tous les sélecteurs inclus correspondent à cet élément. Comme décrit dans les sections suivantes, certains sélecteurs peuvent comporter plusieurs comparaisons jointes par AND ou OR. L'ordre des sélecteurs dans le filtre n'a pas d'importance, mais les comparaisons des différents sélecteurs ne doivent pas être mélangées.

Selon l'objectif du filtre, certains sélecteurs peuvent être obligatoires, facultatifs ou interdits. Par exemple, le filtre utilisé pour répertorier les séries temporelles doit contenir un sélecteur de métrique. Toutefois, le filtre qui définit les ressources d'un groupe ne peut pas contenir de sélecteur de métriques, car les groupes ne contiennent pas de type de métrique ou de série temporelle.

Comparaisons

Les filtres et leurs sélecteurs sont basés sur des comparaisons. Chaque comparaison se présente sous la forme suivante :

  • [OBJECT]: sélectionne une valeur à tester, parmi les suivantes:

    project
    group.id
    metric.type
    metric.labels.[KEY]
    resource.type
    resource.labels.[KEY]
    metadata.system_labels.[KEY]
    metadata.user_labels.[KEYSTRING]
        

    [KEY] est un nom, tel que zone ou instance_id.

    [KEYSTRING] peut être un nom, mais s'il contient des caractères spéciaux, il doit être placé entre guillemets (").

  • [OPERATOR]: opérateur de comparaison, parmi les suivants:

    =            # equality (case-sensitive)
    > < >= <=    # numeric ordering
    !=           # not equal
    :            # "has" substring match and test for key (case-sensitive)
        
  • [VALUE]: valeur littérale ou appel de fonction intégré, parmi les suivants:

    <string>     # "a Unicode string". Don't use apostrophes (`'`) to quote strings.
    <bool>       # true or false
    <number>     # 0, -2, 123456, 3.14156
    <function>   # operators on the right side of '=' or '!=':
                 #   starts_with(<string>)
                 #   ends_with(<string>)
                 #   has_substring(<string> [, ignore_case=false])
                 #   one_of(<string>,...,<string>) for up to 100 strings
                 #   monitoring.regex.full_match(<RE2-string>)
        

    Sauf lorsqu'il est utilisé dans la méthode timeSeries.list, le filtre has_substring utilise un deuxième argument facultatif, qui spécifie si la correspondance ignore ou non la casse. La valeur par défaut est false. La correspondance par défaut est donc sensible à la casse:

    • Sensible à la casse : display_name=has_substring("Demo")
    • Sensible à la casse : display_name=has_substring("Demo", false)
    • Non sensible à la casse : display_name=has_substring("Demo", true)

    Lorsqu'il est utilisé dans la méthode timeSeries.list, seul le format has_substring(<string>) est accepté.

    Le filtre monitoring.regex.full_match utilise une chaîne d'expression régulière dans la syntaxe RE2.

Vous pouvez utiliser les opérateurs suivants pour regrouper ou modifier des comparaisons. OR a une priorité plus élevée que AND. Les opérateurs doivent être écrits en majuscules :

(...)        # grouping comparisons
AND          # conjunction (optional but recommended)
OR           # disjunction

L'opérateur AND peut être omis entre les opérateurs, mais il est plus clair de l'inclure et cela réduit les erreurs.

La comparaison x = one_of("a", "b", "c") équivaut à:

(x = "a" OR x = "b" OR x = "c")
Uniquement dans les définitions de groupe, vous pouvez utiliser l'opérateur de négation unaire NOT avant une comparaison, mais pas avec un opérateur existant (:) ou avant une expression entre parenthèses:

NOT          # negates the following comparison

Sélecteurs de filtres

Les sélecteurs vous permettent de limiter les sélections de filtres à certains éléments. Dans les sections suivantes, les accolades sont utilisées pour afficher la répétition. Par exemple, la notation <x> {OR <y>} signifie que vous pouvez écrire l'un des éléments suivants:

<x>
<x> OR <y>
<x> OR <y> OR <y>
<x> OR <y> OR <y> OR <y>
...

Sélecteur de projet

Un sélecteur de projet limite la sélection du filtre aux éléments appartenant à un seul projet ou à n'importe quel projet d'un ensemble de projets. Chaque projet peut être spécifié par son ID ou son numéro:

<project_selector> ::= project '=' (<number> | <string>) {OR project '=' (<number> | <string>)}

Si le sélecteur de projet comporte plusieurs comparaisons, placez le sélecteur entier entre parenthèses pour une meilleure lisibilité. Exemple :

(project=12345 OR project="my-project-id") AND resource.type="gce_instance"

Sélecteur de groupe

Un sélecteur de groupe limite la sélection du filtre aux éléments appartenant à un seul groupe :

<group_selector> ::= group.id '=' <string>

Par exemple, le filtre suivant peut être utilisé pour récupérer une série temporelle de chacune des instances de VM d'un groupe:

group.id = 12345 AND
resource.type = "gce_instance" AND
metric.type = "compute.googleapis.com/instance/disk/read_bytes_count"

Le sélecteur de groupe n'est autorisé que dans les filtres transmis à la méthode projects.timeSeries.list. De plus, la sélection de groupes nécessite des données alignées. Autrement dit, l'appel de projects.timeSeries.list doit inclure les valeurs des champs perSeriesAligner et alignmentPeriod. En effet, l'appartenance à un groupe est elle-même une sorte de série temporelle qui doit être associée aux données de métrique. Si vous spécifiez des paramètres d'alignement, vous pouvez contrôler la manière dont cette agrégation se produit. Pour en savoir plus sur les paramètres d'alignement, consultez la section Agréger des données.

Sélecteur de ressource

Un sélecteur de ressources limite la sélection du filtre aux ressources (ou aux éléments associés aux ressources) qui ont un type de ressource ou des valeurs de libellé spécifiques :

<resource_selector> ::= <resource_type_expression>
                      | <resource_label_expression>
                      | <resource_type_expression> AND <resource_label_expression>

<resource_type_expression> ::= resource.type '=' <string>
                             | resource.type ':' <string>
                             | resource.type '=' starts_with '(' <string>')'
                             | resource.type '=' ends_with '(' <string> ')'

<r_label_comparison> ::= resource.labels.[KEY] '=' (<string> | <bool>)
                       | resource.labels.[KEY] ':' <string>
                       | resource.labels.[KEY] '=' (starts_with | ends_with) '(' <string> ')'
                       | resource.labels.[KEY] ('=' | '>' | '<' | '>=' | '<=') <number>

<resource_label_expression> ::= <r_label_comparison> {AND <r_label_comparison>}
                              | <r_label_comparison> {OR <r_label_comparison>}

Si vous utilisez plusieurs <r_label_comparison> dans votre sélecteur, placez-les entre parenthèses pour une meilleure lisibilité. Par exemple, le filtre suivant peut être utilisé pour définir un groupe incluant toutes les instances de VM Compute Engine aux États-Unis et en Europe.

resource.type = "gce_instance" AND
(resource.labels.zone = starts_with("us-") OR resource.labels.zone = starts_with("europe-"))

Sélecteur de ressource pour les définitions de groupes

Les sélecteurs de ressource utilisés pour définir l'appartenance à un groupe utilisent des extensions de la syntaxe <resource_selector> :

  • Vous incluez des filtres en fonction de la valeur des libellés système de métadonnées (metadata.system_labels.[KEY]) et des libellés utilisateur de métadonnées (metadata.user_labels.[KEYSTRING]). Nous vous recommandons de placer les clés de metadata.user_labels entre guillemets, car elles peuvent contenir des caractères spéciaux tels que des tirets.

    Lorsqu'un sélecteur contient un filtre de métadonnées et un filtre de ressources, vous devez les combiner avec AND. Vous ne pouvez pas utiliser OR. Par exemple, un graphique avec le sélecteur suivant affiche l'utilisation du processeur pour toutes les instances de VM avec un type de machine e2-medium ou e2-micro:

    metric.type="compute.googleapis.com/instance/cpu/utilization"
    resource.type="gce_instance" AND
    (metadata.system_labels."machine_type"="e2-medium" OR
    metadata.system_labels."machine_type"="e2-micro")
    
  • Vous pouvez utiliser l'opérateur "différent de" (!=) pour comparer les types de ressources, les libellés de ressource et les métadonnées. L'opérateur peut être utilisé lors de la comparaison de chaînes, de nombres, de valeurs booléennes ou de fonctions de sous-chaîne. Par exemple, resource.type!=starts_with("gce") est défini sur "true" si le type de ressource ne commence pas par "gce".

  • Vous pouvez utiliser un seul opérateur NOT avant une comparaison de ressources. Par exemple, NOT resource.labels.zone="europe" est défini sur "true" si la zone de la ressource n'inclut pas "europe". Vous ne pouvez pas utiliser NOT avant un opérateur existant (:) ou une expression entre parenthèses.

  • Vous pouvez utiliser l'opérateur "exists" (:) pour tester l'existence de clés. Par exemple, la comparaison resource.labels:zone est définie sur "true" si la clé de libellé zone est présente dans la ressource.

Par exemple, l'une des clés de métadonnées de ressource de plate-forme pour les instances de VM est spot_instance. Le sélecteur de filtre suivant sélectionne les instances qui sont des instances spot :

resource.type = "gce_instance" AND metadata.system_labels.spot_instance = true

Sélecteur de métrique

Un sélecteur de métrique spécifie certaines métriques ou certains descripteurs de métriques en limitant le type de métrique et les libellés de métriques. Lorsqu'il est utilisé avec la méthode projects.timeSeries.list, le sélecteur de métrique doit spécifier un seul type de métrique:

<metric_selector> ::= <metric_name_expression> [AND <metric_label_expression>]

<metric_name_expression> ::= metric.type '=' <string>
                           | metric.type ':' <string>
                           | metric.type '=' starts_with '(' <string> ')'
                           | metric.type '=' ends_with '(' <string> ')'

<metric_label_comparison> ::= metric.labels.[KEY] '=' <string> | <bool>
                            | metric.labels.[KEY] ':' <string>
                            | metric.labels.[KEY] '=' starts_with '(' <string> ')'
                            | metric.labels.[KEY] '=' ends_with '(' <string> ')'
                            | metric.labels.[KEY] ('=' | '>' | '<' | '>=' | '<=') <number>

<metric_label_expression> ::= <metric_label_comparison> {[AND] <metric_label_comparison>}
                            | <metric_label_comparison> {OR <metric_label_comparison>}

Par exemple, le filtre suivant peut être utilisé afin de récupérer une série temporelle pour une instance de base de données spécifique:

metric.type = "cloudsql.googleapis.com/database/state" AND
(metric.labels.resource_type = "instance" AND
 metric.labels.resource_id = "abc-123456")