Labels für logbasierte Messwerte konfigurieren

In diesem Dokument werden Label für logbasierte Messwerte erläutert. Weiter wird beschrieben, wie Sie Label für logbasierte Messwerte erstellen und verwenden.

Wenn Sie mit Labels vertraut sind, können Sie direkt zum Abschnitt Label erstellen auf dieser Seite gehen.

Labels für logbasierte Messwerte

Durch die Verwendung von Labels können logbasierte Messwerte mehrere Zeitachsen – eine pro Kombination von Labelwerten – enthalten. Alle logbasierten Messwerte haben Standardlabel.

Sie können sowohl für Zähler- als auch für Verteilungsmesswerte zusätzliche, benutzerdefinierte Labels erstellen, indem Sie Extrahiererausdrücke angeben. Ein Extrahiererausdruck teilt Cloud Logging mit, wie der Wert des Labels aus Logeinträgen extrahiert werden soll. So können Sie den Wert des Labels angeben:

  • Als gesamten Inhalt eines benannten Felds im LogEntry-Objekt
  • Als Teil eines benannten Felds, das mit einem regulären Ausdruck übereinstimmt

Sie können Labels aus den integrierten Feldern von LogEntry, z. B. httpRequest.status, oder aus einem der Nutzlastfelder textPayload, jsonPayload oder protoPayload extrahieren.

Weitere Informationen zu regulären Ausdrücken finden Sie auf der Seite zur RE2-Syntax.

Geben Sie keine vertraulichen Informationen in den Ausdruck des Extractors ein und extrahieren Sie keine vertraulichen Daten in Labels. Diese werden als Dienstdaten behandelt.

Beschränkungen von benutzerdefinierten Labels

Für benutzerdefinierte Labels gelten folgende Beschränkungen:

  • Sie können pro Messwert bis zu 10 benutzerdefinierte Labels erstellen.

  • Nachdem Sie ein Label erstellt haben, können Sie es nicht mehr löschen.

    • Sie können den Extrahiererausdruck und die Beschreibung eines bereits erstellten Labels ändern.

    • Sie können den Namen oder Werttyp eines bereits erstellten Labels nicht ändern.

  • Nur die ersten 1.024 Zeichen eines Labelwerts werden beibehalten.

  • Jeder logbasierte Messwert ist auf etwa 30.000 aktive Zeitachsen beschränkt, die von der Anzahl der möglichen Werte für jedes Label, einschließlich der Standardlabels, abhängen.

    Wenn Ihre Logeinträge beispielsweise aus 100 Ressourcen (z. B. VM-Instanzen) stammen und Sie eine Bezeichnung mit 20 möglichen Werten definieren, können Sie für Ihren Messwert bis zu 2.000 Zeitachsen verwenden.

Wenn Sie zu viele Zeitachsen oder zu viele Datenpunkte haben, steigen Ihre Kosten und Ihre Aktivitäten könnten behindert werden. Weitere Informationen zu den Kosten logbasierter Messwerte finden Sie unter Cloud Monitoring-Preise: Kostenpflichtige Messwerte. Informationen zu den Limits für logbasierte Messwerte finden Sie unter Kontingente und Limits: Logbasierte Messwerte und Fehlerbehebung bei logbasierten Messwerten.

Standardlabels

Die meisten logbasierten Messwerte haben vordefinierte Label:

  • Ressourcenlabel: Bei allen Messwerten wird ein überwachtes Ressourcenobjekt verwendet, um die Quelle von Zeitachsendaten zu identifizieren. Jeder Ressourcentyp enthält einen Typnamen und ein oder mehrere Label. Beispiele für Ressourcentypen sind VM-Instanzen, Cloud SQL-Datenbanken und Load Balancer.

    Die Ressource und ihre Labels werden in Cloud Monitoring von anderen Messwertlabels getrennt aufgelistet. Sie dienen jedoch alle dem Zweck, zusätzliche Zeitachsen im Messwert zu erstellen. Weitere Informationen finden Sie unter Messwerte, Zeitachsen und Ressourcen.

  • log: Dieses Label enthält den LOG_ID-Anteil des Felds logName in den Logeinträgen.

  • severity: Dieses Label enthält den Wert des Felds severity in Logeinträgen. Der Schweregrad wird standardmäßig nur in logbasierten Systemmesswerten bereitgestellt.

Labels mit dem Metrics Explorer aufrufen

So rufen Sie die Labels für eine Zeitreihe auf, die für einen logbasierten Messwert generiert wurde:

  1. Google Cloud Rufen Sie in der Console die Seite Logbasierte Messwerte auf:

    Zu Logbasierte Messwerte

    Wenn Sie diese Seite über die Suchleiste suchen, wählen Sie das Ergebnis aus, dessen Zwischenüberschrift Logging ist.

  2. Suchen Sie den Messwert, den Sie anzeigen lassen möchten, und wählen Sie im Dreipunkt-Menü  Mehr die Option Im Metrics Explorer ansehen aus.

    Warten Sie, bis im Diagramm Daten angezeigt werden. Bei einem protokollbasierten Messwert kann das einige Minuten dauern.

  3. Maximieren Sie das Feld Filter, um die verfügbaren Labels zu sehen. Möglicherweise werden Ressourcenlabels und Messwertlabels angezeigt. Die Liste der Labels ist spezifisch für den Ressourcentyp und den Messwerttyp. Beispiel:

    • Der Ressourcentyp gce_instance hat drei Ressourcenlabels: project_id, instance_id und zone.

    • Der Messwerttyp logging/log_entry_count hat zwei Messwertlabels: log und severity. Ihre benutzerdefinierten Labels werden ebenfalls in diesem Abschnitt angezeigt.

  4. So prüfen Sie, ob mit einem benutzerdefinierten Label die richtigen Daten aus Ihren Protokolleinträgen extrahiert werden:

    1. Ändern Sie das Element Aggregation in Nicht aggregiert.

    2. Wählen Sie im Diagramm entweder Tabelle oder Beides aus.

    3. Wählen Sie in der Symbolleiste Menü „Spaltenanzeige“ und dann die Labels aus. In diesem Menü werden alle Labels angezeigt, für die es Daten gibt.

      Wenn Sie ein von Ihnen erstelltes Label nicht sehen, prüfen Sie den Feldnamen und den Ausdruck für den Extraktor.

Label erstellen

Benutzerdefinierte Labels werden zusammen mit dem Messwert erstellt. Sowohl Zählermesswerte als auch Verteilungsmesswerte können Labels haben. Sie können logbasierten Systemmesswerten keine Label hinzufügen.

Wenn Sie ein Label erstellen möchten, geben Sie das Feld im Logeintrag an und definieren Sie dann einen Ausdruck, mit dem ein Wert aus dem angegebenen Feld extrahiert wird.

Console

  1. Wenn Sie einen logbasierten Messwert erstellen, enthält der Bereich Logmesswert erstellen eine Option zum Hinzufügen eines Labels.

  2. Klicken Sie auf Label hinzufügen.

    Tipp: So rufen Sie die Felder und Werte in einem Logeintrag auf:

    1. Klicken Sie im Abschnitt Filterauswahl auf Logvorschau ansehen.
    2. Wählen Sie im Bereich Logs ansehen einen Logeintrag aus und klicken Sie daneben auf Maximieren .
    3. Klicken Sie auf Verschachtelte Felder erweitern.
  3. Legen Sie im Abschnitt Details folgende Felder fest:

    1. Labelname: Geben Sie einen Namen für das Label ein. Beispiel: ID.

      Der Name muss folgende Kriterien erfüllen:

      • Nicht länger als 100 Zeichen sein
      • Dem regulären Ausdruck [a-zA-Z][a-zA-Z0-9_]* entsprechen
      • Aus mehr als nur dem String "log" bestehen
    2. Beschreibung: Geben Sie eine Beschreibung des Labels ein. Seien Sie so genau wie möglich, was das Format erwarteter Logwerte angeht. Beispiel: Instance number

    3. Label type (Labeltyp): Wählen Sie String, Boolesch oder Ganzzahl aus.

    4. Feldname: Geben Sie den Namen des Feldes für den Logeintrag ein, das den Labelwert enthält. Bei der Eingabe werden Optionen zur Auswahl angezeigt. Das Feld ist in diesem Beispiel:

      labels."compute.googleapis.com/resource_id"
      
    5. Regulärer Ausdruck: Wenn der Labelwert aus allen Inhalten des Feldes besteht, können Sie dieses Feld leer lassen. Geben Sie andernfalls eine Regex-Erfassungsgruppe an, die den Labelwert aus dem Feldwert extrahiert.

      Angenommen, das Feld enthält in der Regel folgenden Text:

      The instance number is 0123456789; the ID is my-test-instance22
      

      Wenn der Labelwert die Instanznummer sein soll, können Sie zum Extrahieren der richtigen Nummer verschiedene reguläre Ausdrücke verwenden. Im folgenden Ausdruck sind die Klammern beispielsweise eine Erfassungsgruppe, die den zu extrahierenden Teil des Texts angibt:

      The instance number is ([0-9]+); .*
      

      Weitere Informationen zu regulären Ausdrücken finden Sie auf der Seite zur RE2-Syntax.

  4. Klicken Sie auf Fertig, um das Label zu erstellen. Wiederholen Sie diese Schritte, um weitere Labels hinzuzufügen.

  5. Klicken Sie zum Erstellen des Messwerts auf Messwert erstellen.

gcloud

Wenn Sie einen protokollbasierten Messwert mit benutzerdefinierten Labels erstellen möchten, müssen Sie eine Datei erstellen, die eine Darstellung Ihrer LogMetric-Definition im JSON- oder YAML-Format enthält, einschließlich der benutzerdefinierten Labels. Erstellen Sie dann den Messwert, indem Sie den Befehl create mit dem Flag --config-from-file aufrufen und FILENAME durch den Namen Ihrer JSON- oder YAML-Datei ersetzen:

gcloud logging metrics create METRIC_NAME --config-from-file FILENAME

Weitere Informationen finden Sie unter gcloud logging metrics create.

API

Labels werden als Teil des LogMetric-Objekts im Anfragetext von Aufrufen der Methode projects.metrics.create der Logging API angegeben. Informationen zu den vollständigen Aufrufen von Methoden finden Sie unter Zählermesswerte erstellen oder Verteilungsmesswerte erstellen.

Für jedes Label müssen Sie in LogMetric ein Segment zu den Feldern metricDescriptor und labelExtractors hinzufügen.

Die Syntax lautet so:

{
  ...
  metricDescriptor: {
      labels: [
        { key: LABEL_NAME, valueType: LABEL_TYPE,
          description: LABEL_DESCRIPTION },
        ...
      ]
  },
  labelExtractors: {
    LABEL_NAME: EXTRACTOR_EXPRESSION,
    ...
  },
}

Die Syntaxelemente haben folgende Bedeutung:

  • LABEL_NAME: Der Labelname als String
  • VALUE_TYPE: Der Typ des Labels: STRING, BOOL oder INT64
  • LABEL_DESCRIPTION: Eine Beschreibung des Labels
  • EXTRACTOR_EXPRESSION: Ein String, mit dem der Name des Felds für den Logeintrag mit einem optionalen regulären Ausdruck kombiniert wird. Der Extrahiererausdruck kann einen der folgenden Werte haben:

    EXTRACT(FIELD)
    
    REGEXP_EXTRACT(FIELD, REGEXP)
    

Weitere Informationen zu regulären Ausdrücken finden Sie auf der Seite zur RE2-Syntax.

Im folgenden Beispiel werden zwei Labels verwendet:

{
  ...
  metricDescriptor: {
      labels: [
        { key: "label_name_a", valueType: STRING },
        { key: "label_name_b", valueType: INT64 },
      ]
  },
  labelExtractors: {
    "label_name_a":
      "REGEXP_EXTRACT(jsonPayload.field_a, \"before ([a-zA-Z ]+) after\")",
    "label_name_b": "EXTRACT(jsonPayload.field_b)",
  },
}

Weitere Informationen finden Sie unter LogMetric.

Beispiele

In diesem Abschnitt finden Sie einige Beispiele, die Ihnen den Einstieg in das Erstellen von Labels für benutzerdefinierte logbasierte Messwerte erleichtern sollen. Nachdem Sie ein Label erstellt haben, empfehlen wir Ihnen, die Labels mit dem Metrics Explorer zu überprüfen.

Tipps:

  • Sie müssen eine Erfassungsgruppe verwenden, wenn Sie einen Ausdruck für den Extractor angeben.
  • Wenn Sie keinen Ausdruck für den Extractor angeben, wird der gesamte Wert des Felds extrahiert.
  • Die möglichen Werte für jedes Label müssen eingeschränkt sein. Ein kleiner Satz diskreter Werte (z. B. „Rot“, „Grün“ und „Blau“) wird bevorzugt. Wenn Sie beispielsweise die 8‑Bit-RGB-Werte für ein Farblabel extrahieren, können Sie über 16 Millionen verschiedene Werte haben. Das bedeutet, dass Sie über 16 Millionen Zeitreihen haben könnten.

    Extrahieren Sie keine hochauflösenden Werte wie Zeitstempel, eindeutige Kennungen, Nutzer-IDs, IP-Adressen, nicht parametrisierte URLs usw.

Statuscode aus einem Audit-Log extrahieren

Wenn ein Feld keine Sonderzeichen enthält, können Sie den Feldnamen im Label für den datenlogistischen Messwert verwenden.

Bei Audit-Logs entspricht das Feld protoPayload beispielsweise der Struktur AuditLog. Wenn Sie das Feld status aus einem Audit-Log extrahieren möchten, können Sie den Feldnamen auf protoPayload.status.code festlegen und den Ausdruck für den Extractor leer lassen.

Wenn Sie nur die erste Ziffer des Fehlercodes extrahieren möchten, können Sie den Ausdruck für den Extraktor auf (\d)\d\d festlegen.

Wert aus einem Feld mit Sonderzeichen extrahieren

Wenn ein Feld in einem Logeintrag Sonderzeichen enthält, setzen Sie es in doppelte Anführungszeichen.

Wenn Sie beispielsweise den gesamten Wert des Labels k8s-pod/k8s-app extrahieren möchten, legen Sie den Feldnamen auf labels."k8s-pod/k8s-app" fest und lassen Sie den Ausdruck leer.

Wert aus einer Textnutzlast extrahieren

Betrachten Sie einen Logeintrag im folgenden Format:

textPayload: "unfinished_task_instance_count.py:61 Unfinished task instance count metric value 0 for state: deferred"

Wenn Sie den Wert für den Status, z. B. deferred, aus Protokolleinträgen mit dem vorherigen Format extrahieren möchten, können Sie Folgendes tun:

  • Feldname: textPayload
  • Ausdruck für den Datenextraktor: ^unfinished.*state: ([a-z]+)

Wert aus einem wiederkehrenden Feld extrahieren

Ein Logeintrag kann ein Feld mit wiederholten Feldern enthalten. In JSON werden diese Felder in eckigen Klammern ([]) dargestellt. Betrachten Sie die wiederholten Felder aus der Perspektive von Labels als Satz und den Label-Extractor als Iterator. Sie geben die Kriterien für die Übereinstimmung an, wenn Sie das Label definieren. Der Extractor durchsucht dann die Gruppe, bis eine Übereinstimmung gefunden wird. Es wird immer die erste Übereinstimmung zurückgegeben, auch wenn mehrere Elemente des Satzes den Kriterien entsprechen.

Sie möchten einen logbasierten Messwert erstellen, mit dem Audit-Logs gezählt werden. Bevor Sie das Label konfigurieren, sehen Sie sich mehrere Prüfprotokolle an und stellen fest, dass das Format der protoPayload der Struktur AuditLog entspricht. Im Folgenden ist ein Teil eines Audit-Logeintrags dargestellt.

{
  ...
  protoPayload: {
    @type: "type.googleapis.com/google.cloud.audit.AuditLog"
    authenticationInfo: {1}
    authorizationInfo: [
      0: {
        granted: true
        permission: "io.k8s.coordination.v1.leases.get"
        resource: "coordination.k8s.io/v1/namespaces/kube-system/leases/maintenance-controller"
      }
    ]
    requestMetadata: {2}
    status: {1}
    ...
  }
  ...
}

Sie erstellen ein Label für Ihren logbasierten Messwert, in dem Informationen aus dem Feld permission gespeichert werden. Sie stellen fest, dass diese Felder wie io.k8s.xxx formatiert sind, wobei xxx ein String ist, der weitere Details zur Anfrage enthält. Dieser String kann einen Wert wie get oder eine komplexere Formatierung wie io.k8s.coordination.v1.leases.get haben.

Um die Anzahl der Labelwerte zu minimieren, sollten Sie die detaillierten Informationen nicht extrahieren. Sie möchten nur Werte wie get oder coordination im Label speichern. Außerdem möchten Sie das gängige Präfix io.k8s. nicht in den Labelwert aufnehmen.

Als Nächstes konfigurieren Sie das Label. Da das Feld permission ein wiederholtes Feld ist, dessen übergeordnetes Feld authorizationInfo ist, legen Sie den Feldnamen so fest:

protoPayload.authorizationInfo.permission

Als Nächstes erstellen Sie den folgenden regulären Ausdruck:

io.k8s.([a-z]+).*