Ver registros de flujos de trabajo avanzados en Cloud Logging

En esta página se describe cómo habilitar Cloud Logging en los clústeres de Dataproc de Cloud Data Fusion y cómo acceder a los registros avanzados de las canalizaciones.

Habilitar Cloud Logging de Dataproc

Para ver los problemas de los flujos de procesamiento y los clústeres en Cloud Logging, habilita los registros avanzados en las instancias de Cloud Data Fusion nuevas o en las que ya tengas. Para habilitar los registros avanzados en una instancia, sigue estos pasos:

  1. En la Google Cloud consola, ve a la página Instancias de Cloud Data Fusion.

    Ir a Instancias

  2. Haz clic en el nombre de la instancia.

  3. En la sección Monitorización y registro avanzados, en Registro de Cloud de Dataproc, haz clic en Editar.

  4. En la ventana Cloud Logging, marca la casilla Habilitar Cloud Logging.

  5. Haz clic en Guardar.

Ver registros

A cada ejecución de un flujo de procesamiento de Cloud Data Fusion se le asigna un RunID único. Una vez que hayas implementado y ejecutado tu canalización, busca su RunID. A continuación, en Logging, usa RunID para ver los registros de tu canalización.

Obtener el RunID de la canalización

  1. Ve a tu instancia:
    1. En la Google Cloud consola, ve a la página de Cloud Data Fusion.

    2. Para abrir la instancia en Cloud Data Fusion Studio, haga clic en Instancias y, a continuación, en Ver instancia.

      Ir a Instancias

  2. Haz clic en Lista.
  3. Haz clic en la canalización de la que quieras obtener el ID de ejecución.
  4. Haz clic en Resumen.
  5. En la sección Historial de ejecuciones, haga clic en Tabla.
  6. Para copiar el ID de ejecución, haz clic con el botón derecho en RunID y, a continuación, en Copy (Copiar).

Ver los registros en el explorador de registros

  1. En la Google Cloud consola, ve a la página Cloud Logging > Explorador de registros:

    Ir a Explorador de registros

  2. En el desplegable Todos los recursos, selecciona Clúster de Cloud Dataproc > cdap-PIPELINE_NAME-YOUR_RUNID.

Opcional: Filtrar los registros

Usa los menús de filtros para filtrar los registros. Puedes filtrar por varios niveles de gravedad de los registros o por componentes, como datafusion-pipeline-logs.

Opcional: Descargar los registros

Haga clic en Descargar registros.

Para obtener más información, consulta el artículo sobre cómo descargar entradas de registro.

Siguientes pasos