Respuesta correcta
- CDataflow streaming con procesamiento de exactamente una vez
Explicación
Dataflow streaming con procesamiento de exactamente una vez es la opción correcta porque proporciona semántica de exactamente una vez para fuentes de Pub/Sub a través de puntos de control (checkpointing) y sumideros idempotentes, y cumple con el requisito de baja latencia (en segundos) a través de su motor de transmisión que minimiza la sobrecarga por elemento. La integración de Cloud Dataflow con Pub/Sub garantiza que cada mensaje se procese exactamente una vez, incluso en presencia de fallas, mediante el uso de instantáneas (snapshots) y una gestión de estado consistente.
Para profundizar
El procesamiento de exactamente una vez de Dataflow se logra mediante una combinación de deduplicación en el origen (utilizando IDs de mensajes de Pub/Sub y puntos de control basados en instantáneas) e idempotencia en el destino (por ejemplo, inserciones de streaming de BigQuery con insertId). Bajo el capó, Dataflow utiliza un algoritmo de instantáneas distribuidas (basado en el modelo de Chandy-Lamport) para capturar el estado de todos los operadores y el progreso de cada suscripción de Pub/Sub, permitiéndole reanudar desde el punto exacto de la falla sin procesamiento duplicado. En un escenario del mundo real, si un trabajador falla a mitad de flujo, la instantánea de Dataflow garantiza que ningún mensaje se procese más de una vez, lo cual es crítico para transacciones financieras o datos de sensores donde los duplicados podrían causar agregados incorrectos.
Sobre estas preguntas de práctica
Esta es una de las preguntas de práctica originales de PDE de Courseiva, escrita para aprender y nunca copiada de exámenes reales ni de dumps.
Traducida del original en inglés con IA y revisada para comprobar el sentido. Los códigos de examen, los comandos y los nombres de productos se mantienen tal como aparecen en el examen.