Puoi visualizzare, cercare, filtrare e archiviare i log dei job di Dataproc Metastore in Cloud Logging.
Consulta la pagina Prezzi di Google Cloud Observability per conoscere i costi.
Per informazioni sulla conservazione dei log, consulta Periodi di conservazione dei log.
Consulta la sezione Esclusioni di log per disattivare tutti i log o escluderne alcuni dalla registrazione.
Consulta la Panoramica di routing e archiviazione per instradare i log da Logging a Cloud Storage, BigQuery o Pub/Sub.
Accedere ai log dei job in Logging
Quando esegui Dataproc Metastore, l'output di un processo del metastore Hive viene trasmesso in streaming alla console Google Cloud.
Puoi accedere a Logging utilizzando la console Logging, il comando gcloud logging o l'API Logging.
Console
Nella console Google Cloud, vai alla pagina Cloud Logging > Log (Esplora log):
Seleziona un progetto Google Cloud Dataproc Metastore esistente.
Nel menu Risorse, seleziona
Dataproc Metastore Service.Nel menu Tutti i log, seleziona il tipo di log che vuoi visualizzare.
gcloud
Google Cloud CLI dispone di un gruppo di comandi, gcloud logging, che forniscono un'interfaccia a riga di comando per l'API Cloud Logging. Per leggere le voci di log,
esegui il seguente comando:
gcloud logging read \
'resource.type="metastore.googleapis.com/Service"
resource.labels.location=LOCATION
resource.labels.service_id=SERVICE_ID'
REST
Segui le istruzioni dell'API Logging per elencare le voci di log (entries.list) utilizzando l'API Explorer.
Log del servizio Dataproc Metastore in Logistica
Dataproc Metastore esporta i log delle richieste e di sistema in Cloud Logging.
| Tipo di log | Nome log | Query logName |
|---|---|---|
| Richiedere log | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
| Log di sistema | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |