Cuando ejecutas tu canalización con Dataflow, puedes ver ese trabajo y cualquier otro mediante la interfaz de supervisión de Dataflow. La interfaz de supervisión te permite ver tus trabajos de Dataflow y también interactuar con ellos.
Puedes acceder a la interfaz de supervisión de Dataflow en la consola de Google Cloud.
Entre las tareas que puedes realizar con la interfaz de supervisión, se incluyen las siguientes:
- Consulta una lista de los trabajos en ejecución, completados y con errores.
- Consultar una representación gráfica de las etapas de un trabajo y el progreso de cada etapa
- Visualizar gráficos de métricas de trabajo, como la actualización de datos, el uso de recursos y las solicitudes de E/S
- Supervisar el costo estimado de un trabajo
- Visualiza los registros de la canalización.
- Identifica qué pasos podrían causar un retraso en la canalización.
- Identifica las causas de la latencia en tus fuentes y receptores.
- Comprende los errores de la canalización.
Componentes de la interfaz de supervisión
La interfaz de supervisión contiene los siguientes visualizadores y gráficos:
- Panel de supervisión del proyecto
- Un panel que supervisa tus trabajos de Dataflow a nivel del proyecto.
- Lista de trabajos
- Una lista de todos los trabajos de Dataflow en ejecución y todos los trabajos que se ejecutaron en los últimos 30 días, junto con su estado, región, tiempo transcurrido y otra información.
- Gráfico de trabajo
- Una representación gráfica de una canalización. El gráfico de trabajo también proporciona un resumen del trabajo, un registro de trabajo y la información sobre cada paso de la canalización.
- Detalles de la ejecución
- Muestra las etapas de ejecución de un trabajo, la actualización de los datos para los trabajos de transmisión y el progreso de los trabajadores para los trabajos por lotes.
- Métricas de trabajos
- Gráficos que muestran métricas durante la ejecución de un trabajo.
- Costo estimado
- El costo estimado de tu trabajo de Dataflow, según las métricas de uso de los recursos.
- Recomendaciones
- Recomendaciones para mejorar el rendimiento de las tareas, reducir los costos y solucionar errores.
- Ajuste de escala automático
- Un conjunto de gráficos que te ayudan a comprender el comportamiento del ajuste de escala automático de las tareas de transmisión.
- Registros de canalización
- Registros emitidos por tu canalización y por el servicio de Dataflow.
- Muestreo de datos
- Una herramienta que te permite observar los datos muestreados en cada paso de una canalización.
¿Qué sigue?
- Usa Cloud Monitoring para crear alertas y ver métricas de Dataflow, incluidas las métricas personalizadas
- Obtén más información sobre cómo compilar canalizaciones de datos listas para la producción.
- Obtén más información para solucionar problemas de tu canalización