Puoi visualizzare, cercare, filtrare e archiviare i log dei job Dataproc Metastore in Cloud Logging.
Consulta la pagina Prezzi di Google Cloud Observability per comprendere i costi.
Per informazioni sulla conservazione dei log, consulta la sezione Periodi di conservazione dei log.
Consulta la sezione Esclusioni dei log per disattivare tutti i log o escludere i log dalla registrazione.
Consulta la panoramica del routing e dell'archiviazione per indirizzare i log da Logging a Cloud Storage, BigQuery o Pub/Sub.
Accedere ai log dei job in Logging
Quando esegui Dataproc Metastore, l'output di un processo di metastore Hive viene trasmesso in streaming alla console Google Cloud .
Puoi accedere a Logging utilizzando la console Logging, il comando gcloud logging o l'API Logging.
Console
Nella console Google Cloud , vai alla pagina Cloud Logging > Log (Esplora log):
Seleziona un progetto Google Cloud Dataproc Metastore esistente.
Nel menu Risorse, seleziona
Dataproc Metastore Service.Nel menu Tutti i log, seleziona il tipo di log che vuoi visualizzare.
gcloud
Google Cloud CLI ha un gruppo di comandi, gcloud logging, che forniscono un'interfaccia a riga di comando per l'API Cloud Logging. Per leggere le voci di log,
esegui questo comando:
gcloud logging read \
'resource.type="metastore.googleapis.com/Service"
resource.labels.location=LOCATION
resource.labels.service_id=SERVICE_ID'
REST
Segui le istruzioni dell'API Logging per elencare le voci di log (entries.list) utilizzando Explorer API.
Log del servizio Dataproc Metastore in Logging
Dataproc Metastore esporta i log di sistema e delle richieste in Cloud Logging.
| Tipo di log | Nome log | Query logName |
|---|---|---|
| Richiedere log | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
| Log di sistema | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |