MoyenneChoix unique

Question d'entraînement DEA-C01

Une entreprise utilise AWS Kinesis Data Streams pour ingérer des données en temps réel. Le data engineer remarque que l'erreur 'WriteProvisionedThroughputExceeded' du flux se produit fréquemment lors des pics. Quelle action doit être entreprise pour résoudre ce problème ?

Choisissez la meilleure réponse.

Bonne réponse

  • AAugmenter le nombre de shards dans le flux.

Explication

L'erreur 'WriteProvisionedThroughputExceeded' se produit lorsque la capacité d'écriture du flux est dépassée. Augmenter le nombre de shards (A) augmente la capacité d'écriture du flux, car chaque shard fournit un débit d'écriture fixe (1 MB/s ou 1000 records/s). Cela résout directement le problème en ajoutant plus de capacité pour gérer les charges de pointe.

Pourquoi chaque option est juste ou fausse

A

Juste

Augmenter le nombre de shards dans le flux.

L'augmentation du nombre de shards élève la capacité totale d'écriture du flux, puisque chaque shard fournit une limite d'ingestion fixe de 1 MB/s et de 1 000 records/s. L'erreur WriteProvisionedThroughputExceeded indique que les producteurs dépassent le débit provisionné agrégé, donc l'ajout de shards satisfait directement la contrainte de demande de pointe décrite dans l'énoncé.

B

Fausse

Modifier le producteur pour utiliser une clé de partition différente.

Changer la clé de partition ne fait que redistribuer la charge sur les shards existants ; si le débit d'écriture total dépasse la capacité provisionnée du flux, les erreurs de shard chaud persistent. C'est tentant car une seule clé de partition chaude provoque une limitation (throttling) et le changement de clé résout ce biais spécifique — mais l'énoncé décrit un épuisement du débit à l'échelle du pic, et non un seul shard surchargé.

C

Fausse

Compresser les données avant de les envoyer au flux.

La compression réduit la taille de la charge utile par enregistrement, mais Kinesis limite les enregistrements par seconde et les octets par seconde par rapport aux limites de shards provisionnées ; le volume d'écriture de pointe dépasse toujours la capacité. C'est tentant car la compression réduit les coûts de bande passante et de stockage, ce qui aide lorsque la taille de la charge utile pilote la limite, mais l'erreur WriteProvisionedThroughputExceeded pilotée par les pics de l'énoncé nécessite une capacité de shard accrue.

D

Fausse

Activer l'enhanced fan-out pour les consommateurs.

L'enhanced fan-out augmente le débit de lecture pour les consommateurs via des canaux dédiés de 2 MB/s ; il n'augmente pas la capacité d'écriture du flux, de sorte que la limitation du producteur continue. C'est tentant car il résout le ReadProvisionedThroughputExceeded côté consommateur lorsque plusieurs applications lisent le même flux, mais l'erreur de l'énoncé se produit sur les écritures, nécessitant plus de shards ou le mode à la demande.

Pour aller plus loin

Kinesis Data Streams se dimensionne par shards. Chaque shard prend en charge jusqu'à 1 MB/s ou 1000 records/s en écriture, et 2 MB/s en lecture. Lorsque le débit d'écriture total dépasse la somme des capacités des shards, le producteur reçoit 'WriteProvisionedThroughputExceeded'. Augmenter les shards (resharding) augmente la capacité mais coûte également plus cher. Alternativement, l'utilisation du mode à la demande (on-demand mode) dimensionne automatiquement la capacité. Les clés de partition déterminent vers quel shard un enregistrement est dirigé ; une clé chaude peut provoquer la limitation d'un seul shard même si d'autres ont de la capacité. La compression réduit la taille des enregistrements, permettant potentiellement plus d'enregistrements par seconde dans la même limite de débit, mais elle n'augmente pas la limite elle-même. Le déploiement de l'enhanced fan-out fournit un débit de lecture dédié par consommateur, jusqu'à 2 MB/s par shard, mais n'affecte pas les écritures. Dans des scénarios réels, la surveillance des métriques CloudWatch telles que WriteProvisionedThroughputExceeded et l'ajustement du nombre de shards ou l'utilisation du mode à la demande sont essentiels pour gérer les pics.

À propos de ces questions d'entraînement

Cette question fait partie des questions d'entraînement DEA-C01 originales de Courseiva, rédigées pour apprendre et jamais copiées d'examens réels ou de dumps.

Traduite de l'original anglais avec l'IA et vérifiée pour le sens. Les codes d'examen, les commandes et les noms de produits sont conservés tels qu'ils apparaissent à l'examen.