6: Комунікації
Ми розглядали модель системи обробки інформації, в якій символи з входу кодуються в біти, які потім надсилаються через «канал» до приймача і декодуються назад в символи, як показано на малюнку 6.1.

У цьому розділі ми зосередимося на тому, як швидко інформація, яка ідентифікує символи, може бути передана на вихід. Самі символи, звичайно, не передаються, а лише інформація, необхідна для їх ідентифікації. Це те, що необхідно для відтворення потоку символів на виході.
Трохи докладніше змоделюємо і джерело, і канал, а потім наведемо три теореми, що стосуються характеристик джерела і ємності каналу.