Bases de la théorie de l'information et du codage

Quel énoncé du théorème du codage de canal de Shannon est correct ?

  1. ASi le débit de transmission est inférieur à la capacité du canal, un codage approprié peut rendre le taux d'erreur aussi faible qu'on le souhaite
  2. BAvec des codes correcteurs d'erreurs suffisamment puissants, le taux d'erreur peut être rendu aussi faible qu'on le souhaite même à des débits supérieurs à la capacité du canal
  3. CSur un canal bruité, le seul moyen d'approcher le taux d'erreur de 0 est d'approcher aussi le débit de transmission de 0
Afficher la réponse et l'explication

Réponse : A. Si le débit de transmission est inférieur à la capacité du canal, un codage approprié peut rendre le taux d'erreur aussi faible qu'on le souhaite

Le théorème du codage de canal montre qu'à tout débit inférieur à la capacité du canal C, le taux d'erreur peut être rendu aussi faible qu'on le souhaite en utilisant des codes suffisamment longs, et que c'est impossible à des débits supérieurs à C. Le théorème montre que de tels codes existent, mais ne donne pas de moyen concret de les construire. Aujourd'hui, des codes dont les performances approchent cette limite (la limite de Shannon), comme les codes LDPC et les codes polaires, sont utilisés en pratique.

S'entraîner sur ce thème Retour au thème

Autres questions sur Bases de la théorie de l'information et du codage

  1. Pour convertir un code de Gray en nombre binaire ordinaire, on garde tel quel le bit de poids fort, et chaque bit de rang inférieur s'obtient comme le OU exclusif du bit binaire déjà trouvé au rang immédiatement supérieur et du bit du code de Gray au même rang. Quel est le code de Gray de 4 bits 1101 converti en binaire ?
  2. Soit −log₂ p bits la quantité d'information obtenue lorsqu'on apprend qu'un événement de probabilité p s'est produit. Quelle est la quantité d'information obtenue lorsqu'on apprend qu'un événement de probabilité 1/8 s'est produit ?
  3. Quelle propriété de la quantité d'information (−log₂ p lorsqu'on apprend qu'un événement de probabilité p s'est produit) est correcte ?
  4. Une source émet les symboles A, B, C et D indépendamment les uns des autres avec les probabilités 1/2, 1/4, 1/8 et 1/8. Quelle est l'entropie (quantité d'information moyenne par symbole) de cette source ?
  5. Quelle association entre l'entropie maximale d'une source qui émet 8 sortes de symboles et la condition dans laquelle ce maximum est atteint est correcte ?