En esta página se describe cómo habilitar Cloud Logging en los clústeres de Dataproc de Cloud Data Fusion y cómo acceder a los registros avanzados de las canalizaciones.
Habilitar Cloud Logging de Dataproc
Para ver los problemas de los flujos de procesamiento y los clústeres en Cloud Logging, habilita los registros avanzados en las instancias de Cloud Data Fusion nuevas o en las que ya tengas. Para habilitar los registros avanzados en una instancia, sigue estos pasos:
En la Google Cloud consola, ve a la página Instancias de Cloud Data Fusion.
Haz clic en el nombre de la instancia.
En la sección Monitorización y registro avanzados, en Registro de Cloud de Dataproc, haz clic en
Editar.En la ventana Cloud Logging, marca la casilla Habilitar Cloud Logging.
Haz clic en Guardar.
Ver registros
A cada ejecución de un flujo de procesamiento de Cloud Data Fusion se le asigna un RunID
único.
Una vez que hayas implementado y ejecutado tu canalización, busca su RunID
. A continuación, en Logging, usa RunID
para ver los registros de tu canalización.
Obtener el RunID de la canalización
- Ve a tu instancia:
En la Google Cloud consola, ve a la página de Cloud Data Fusion.
Para abrir la instancia en Cloud Data Fusion Studio, haga clic en Instancias y, a continuación, en Ver instancia.
- Haz clic en Lista.
- Haz clic en la canalización de la que quieras obtener el ID de ejecución.
- Haz clic en Resumen.
- En la sección Historial de ejecuciones, haga clic en Tabla.
- Para copiar el ID de ejecución, haz clic con el botón derecho en RunID y, a continuación, en Copy (Copiar).
Ver los registros en el explorador de registros
En la Google Cloud consola, ve a la página Cloud Logging > Explorador de registros:
En el desplegable Todos los recursos, selecciona Clúster de Cloud Dataproc >
cdap-PIPELINE_NAME-YOUR_RUNID
.
Opcional: Filtrar los registros
Usa los menús de filtros para filtrar los registros. Puedes filtrar por varios niveles de gravedad de los registros o por componentes, como datafusion-pipeline-logs
.
Opcional: Descargar los registros
Haga clic en Descargar registros.
Para obtener más información, consulta el artículo sobre cómo descargar entradas de registro.
Siguientes pasos
- Consulta cómo ver los registros de auditoría.
- Consulta cómo ver los registros de las canalizaciones desde Pipeline Studio de Cloud Data Fusion.