Respuesta correcta
- AAumentar el número de workers y habilitar el autoescalado para distribuir la carga.
Explicación
El error 'The worker failed to provide a heartbeat' combinado con el alto uso de CPU indica que los workers están sobrecargados y no pueden procesar los datos lo suficientemente rápido como para mantener su latido (heartbeat) hacia el servicio Dataflow. Aumentar el número de workers y habilitar el autoescalado distribuye la carga computacional entre más máquinas, reduciendo la presión de CPU por worker y permitiendo que los latidos se envíen a tiempo. Esto aborda directamente la causa raíz del agotamiento de recursos.
Para profundizar
Los workers de Dataflow emiten latidos al servicio Dataflow; si la CPU de un worker está saturada, el hilo del latido puede quedar hambriento de recursos y el servicio declara al worker como muerto, produciendo 'The worker failed to provide a heartbeat.' Una ventana deslizante de 5 minutos con un período de 1 minuto crea cinco paneles superpuestos por clave, por lo que cada elemento se almacena en búfer y se reemite en múltiples ventanas, multiplicando el estado y el trabajo de agregación por clave. Agregar workers con autoescalado distribuye las claves pesadas y los cómputos por ventana entre más instancias de Compute Engine, restaurando la capacidad de respuesta de los latidos. En la práctica, un pipeline de flujos de clics minoristas que experimenta un pico de tráfico puede sufrir exactamente esta falla; aumentar maxNumWorkers y habilitar el autoescalado lo resuelve sin cambiar la semántica del ventaneo.
Sobre estas preguntas de práctica
Esta es una de las preguntas de práctica originales de PDE de Courseiva, escrita para aprender y nunca copiada de exámenes reales ni de dumps.
Traducida del original en inglés con IA y revisada para comprobar el sentido. Los códigos de examen, los comandos y los nombres de productos se mantienen tal como aparecen en el examen.