Sie können Dataproc Metastore-Joblogs in Cloud Logging aufrufen, durchsuchen, filtern und archivieren.
Informationen zu den Kosten finden Sie unter Google Cloud Observability-Preise.
Unter Aufbewahrungsdauer von Logs finden Sie Informationen zur Logging-Aufbewahrung.
Unter Logausschlüsse finden Sie Informationen zum Deaktivieren aller Logs oder Ausschließen von Logs vom Logging.
Unter Übersicht: Routing und Speicher erfahren Sie, wie Sie Logs von Logging an Cloud Storage, BigQuery oder Pub/Sub weiterleiten.
Auf Jobprotokolle in Logging zugreifen
Wenn Sie Dataproc Metastore ausführen, wird eine Hive-Metastore-Prozessausgabe an die Google Cloud -Konsole gestreamt.
Sie können auf Logging mit der Logging-Konsole, dem Befehl "gcloud logging" oder der Logging API zugreifen.
Console
Google Cloud Rufen Sie in der Console die Seite Cloud Logging > Logs (Log-Explorer) auf:
Wählen Sie ein vorhandenes Dataproc Metastore- Google Cloud Projekt aus.
Wählen Sie im Menü Ressourcen die Option
Dataproc Metastore Serviceaus.Wählen Sie im Menü Alle Protokolle den gewünschten Logtyp aus.
gcloud
Die Google Cloud CLI bietet die Befehlsgruppe gcloud logging, mit der über die Befehlszeile auf die Cloud Logging API zugegriffen werden kann. Führen Sie den folgenden Befehl aus, um Ihre Logeinträge zu lesen.
gcloud logging read \
'resource.type="metastore.googleapis.com/Service"
resource.labels.location=LOCATION
resource.labels.service_id=SERVICE_ID'
REST
Folgen Sie der Anleitung zur Logging API, um Logeinträge (entries.list) mit dem APIs Explorer aufzulisten.
Dataproc Metastore-Dienst-Logs in Logging
Dataproc Metastore exportiert Anfrage- und Systemprotokolle nach Cloud Logging.
| Logtyp | Logname | logName-Abfrage |
|---|---|---|
| Logs anfordern | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
| Systemprotokolle | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |