Respuesta correcta
- BMonitorear la utilización de CPU y memoria de la aplicación Flink utilizando métricas de Amazon CloudWatch.
Explicación
Cuando una aplicación Flink muestra fallos en los puntos de control y un retraso de procesamiento creciente, el primer paso de diagnóstico es verificar la utilización de recursos a través de las métricas de CloudWatch (CPU, memoria, heap, duración del punto de control). Los fallos en los puntos de control a menudo se derivan de contrapresión o agotamiento de recursos, por lo que comprender si la aplicación está limitada por CPU o memoria guía la siguiente acción. Este es el primer paso menos invasivo y más informativo.
Para profundizar
El checkpointing de Flink realiza instantáneas del estado del operador en un almacenamiento duradero (por ejemplo, S3) a intervalos configurados. Los fallos suelen surgir de la contrapresión (operadores lentos que provocan que las barreras de checkpoint se retrasen), memoria insuficiente del task manager que provoca pausas de GC, o el tamaño del estado excediendo los límites configurados. Las métricas de CloudWatch para Kinesis Data Analytics exponen 'cpuUtilization', 'heapMemoryUtilization', 'numRecordsInPerSecond' y métricas relacionadas con los checkpoints como 'lastCheckpointDuration' y 'numberOfFailedCheckpoints'. Un comportamiento sutil: los tiempos de espera de los checkpoints suelen ser un síntoma de contrapresión, no un problema de configuración de checkpoint, por lo que ajustar la configuración de checkpoint sin solucionar el cuello de botella es inútil. Escenario del mundo real: un ingeniero observa un aumento en 'millisBehindLatest' en el origen y fallos en los checkpoints, verifica la utilización del heap, encuentra problemas de GC y aumenta la memoria del task manager o corrige un sink lento.
Sobre estas preguntas de práctica
Esta es una de las preguntas de práctica originales de DEA-C01 de Courseiva, escrita para aprender y nunca copiada de exámenes reales ni de dumps.
Traducida del original en inglés con IA y revisada para comprobar el sentido. Los códigos de examen, los comandos y los nombres de productos se mantienen tal como aparecen en el examen.