Crea alertas de canalización

En esta página, se describe cómo configurar alertas para las canalizaciones de datos en Cloud Data Fusion.

Puedes crear alertas a través de los siguientes servicios:

  • Alertas a través de Cloud Data Fusion: Configuras estas alertas cuando diseñarás una canalización por lotes en Cloud Data Fusion. Después de implementar la canalización, no puedes agregar ni editar una alerta.

  • Alertas basadas en registros a través de Cloud Monitoring: Configuras estas alertas en en la consola de Google Cloud antes y después de implementar la canalización.

Antes de comenzar

Necesitas una instancia de Cloud Data Fusion. Para obtener más información, consulta Crea una instancia de Cloud Data Fusion.

Agregar una alerta en Cloud Data Fusion

  1. Abre tu instancia.

    1. En la consola de Google Cloud, ve a la página de Cloud Data Fusion.

    2. Para abrir la instancia en Cloud Data Fusion Studio, haz clic en Instancias y, luego, en Ver instancia.

      Ir a Instancias

  2. Ve a la página de Studio en la que diseñarás tu canalización.

  3. Haz clic en Configurar > Alertas de canalización > Agregar.

  4. Selecciona y configura la alerta. Para obtener más información sobre la configuración alertas, consulta Alertas de canalización por lotes.

  5. Después de configurar la alerta, haz clic en Validar para verificar si hay errores. Luego, haz clic en Confirmar.

Crea una alerta en Monitoring

  1. Habilita Cloud Logging en tu instancia de Cloud Data Fusion.

  2. Crea una alerta basada en registros.

    1. En la consola de Google Cloud, ve a la página Explorador de registros.

      Ir al Explorador de registros.

      Esta página te permite almacenar, consultar, actualizar y borrar datos.

    2. Ingresa la siguiente consulta:

      resource.type="cloud_dataproc_cluster"
logName="projects/PROJECT_ID/logs/datafusion-pipeline-logs"
resource.labels.project_id="PROJECT_ID"
severity=ERROR
jsonPayload.message=~"Pipeline '.*' failed."

      Reemplaza PROJECT_ID por el ID del proyecto.

    3. Haz clic en Crear alerta y configúrala.

Solo se genera una alerta cuando la canalización se ejecuta en un clúster de Dataproc y falla. En el caso de las fallas de creación de clústeres de Dataproc, la alerta es sin generar.

¿Qué sigue?