Cuando ejecutas tu canalización con Dataflow, puedes ver ese trabajo y cualquier otro con la interfaz de supervisión de Dataflow. La interfaz de supervisión te permite ver tus trabajos de Dataflow y también interactuar con ellos.
Puedes acceder a la interfaz de supervisión de Dataflow enGoogle Cloud console.
Estas son algunas de las tareas que puedes realizar con la interfaz de supervisión:
- Consulta una lista de los trabajos en ejecución, completados y con errores.
- Consulta una representación gráfica de las etapas de un trabajo y el progreso de cada etapa.
- Visualiza gráficos de las métricas del trabajo, como la actualización de datos, el uso de recursos y las solicitudes de E/S.
- Supervisar el costo estimado de un trabajo
- Visualiza los registros de la canalización.
- Identificar qué pasos pueden causar un retraso en la canalización
- Identifica las causas de la latencia en tus fuentes y receptores.
- Comprender los errores de la canalización
Componentes de la interfaz de supervisión
La interfaz de supervisión contiene los siguientes visualizadores y gráficos:
- Panel de supervisión del proyecto
- Un panel que supervisa tus trabajos de Dataflow a nivel del proyecto
- Lista de trabajos
- Una lista de todos los trabajos de Dataflow en ejecución y todos los trabajos que se ejecutaron en los últimos 30 días, junto con su estado, región, tiempo transcurrido y otra información.
- Gráfico de trabajo
- Representación gráfica de una canalización. El gráfico de trabajo también proporciona un resumen del trabajo, un registro de trabajo y la información sobre cada paso de la canalización.
- Detalles de la ejecución
- Muestra las etapas de ejecución de un trabajo, la actualidad de los datos para los trabajos de transmisión y el progreso del trabajador para los trabajos por lotes.
- Métricas de trabajos
- Gráficos que muestran métricas durante la duración de un trabajo.
- Costo estimado
- El costo estimado de tu trabajo de Dataflow, según las métricas de uso de recursos.
- Recomendaciones
- Recomendaciones para mejorar el rendimiento del trabajo, reducir los costos y solucionar errores.
- Ajuste de escala automático
- Un conjunto de gráficos que te ayudan a comprender el comportamiento del ajuste de escala automático de los trabajos de transmisión.
- Registros de canalización
- Registros emitidos por tu canalización y por el servicio de Dataflow.
- Muestreo de datos
- Herramienta que te permite observar los datos muestreados en cada paso de una canalización.
¿Qué sigue?
- Usa Cloud Monitoring para crear alertas y ver métricas de Dataflow, incluidas las métricas personalizadas
- Obtén más información sobre cómo compilar canalizaciones de datos listas para la producción.
- Obtén más información para solucionar problemas de la canalización