Дела Теории коммуникации прежде всего с системами для передачи информации или данных формируют один пункт{*точку*} к другому. Довольно общая блок-схема для визуализирующего поведение таких систем дается в рис. 4.1. Исходный вывод мог бы представлять, например, звуковая форма волны, последовательность двоичных символов формирует магнитную ленту, вывод набора датчиков в космическом исследовании, сенсорный ввод{*вход*} к биологическому организму, или цели в радиолокационной сети. Канал мог бы представлять, например, телефонная линия, высокочастотная радиорелейная линия, линия космической связи, носитель данных, или биологический организм (для случая, где исходный вывод - сенсорный ввод{*вход*} к тому организму). Канал обычно подвергается различным типам шумовых помех, которые на телефонной линии, например, могли бы брать форму изменяющейся во времени частотной характеристики, перекрестные помехи от других строк, тепловых помех, и импульсных шумов переключателя. Кодер в рис. 4.1. Представляет любую обработку исходного вывода, выполненного до передачи. Обработка могла бы включать, например, любая комбинация модуляции, обработки данных, и включения статической неопределимости, чтобы сразиться с шумом канала. Декодер представляет обработку вывода канала с целью создания в адресате приемлемая точная копия (или ответ на) исходный вывод.

В начале 1940-ых математическая теория, для имеющий дело с более фундаментальными аспектами систем связи, была разработана. Различающие характеристики этой теории, сначала, большой акцент на теории вероятности и, во вторых, первичное предприятие{*беспокойство*} с кодером и декодером, и в терминах их функциональных ролей и в терминах существования (или несуществование) кодеров и декодеров, которые достигают данного уровня выполнения{*работы*}. В прошлых 20 годах, теория информации была сделана более точной, была расширена{*продлена*}, и принесена к сути, где это обращается{*применяется*} в практических системах связи.

Как в любой математической теории, теория имеет дело только с математическими моделями а не с физическими источниками и физическими каналами. Можно было бы думал бы, поэтому, что соответствующий способ начинать развитие теории будет с обсуждением того, как создать соответствующие математические модели для физических источников и каналов. Это, однако, - не путь, которым теории созданы, прежде всего, потому что физическая действительность редко достаточно проста быть точно смоделированной математически послушными моделями. Процедура будет должна довольно запустить, изучая самые простые классы математических моделей источников и каналов, используя понимание и результаты, полученные изучать прогрессивно более сложные классы моделей. Естественно, на выбор классов моделей, чтобы учиться будут повлиять и мотивироваться более важными аспектами реальных источников и каналов, но представление{*вид*} что аспекты важны, будет изменяться теоретическими

because quite an extensive theory must be developed before

the more important implications for the design of communication systems will become apparent.

результатами. Наконец, после понимания теории, может быть найдено быть полезным в изучении реальных систем связи в двух путях. Сначала, это обеспечит структуру, чтобы создать детальные модели из реальных источников и каналов. Во вторых, и что более важно, отношения, установленные в соответствии с теорией обеспечивают индикацию относительно типов сделок, которые существуют в построении кодеров и декодеров для данных систем. В то время как вышеупомянутые комментарии могут применяться к почти любой математической теории, они особенно необходимы здесь, потому что весьма обширная теория должна быть разработана прежде, чем более важные значения для проекта систем связи станут очевидными.

Чтобы далее упростить изучение источника моделирует и модели канала, полезно частично изолировать эффект источника в системе связи от такового канала. Это может быть сделано, ломая{*нарушая*} кодер и декодер рис. 4.1. Каждый в две части как показано в рис. 4.2. Цель исходного кодера состоит в том, чтобы представить источник, выводимый последовательностью двоичных символов, и один из главных вопросов предприятия{*беспокойства*} должен определить, сколько двоичных символов в единицу времени требуются к, представляет вывод любой данной исходной модели. Цель кодера канала и декодера состоит в том, чтобы позволить последовательностям данных в двоичном коде быть надежно воспроизведенной при выводе декодера канала, и один конечно, ли ограничение кодера и декодера к форме рис. 4.2. Налагает любые фундаментальные ограничения на выполнение{*работу*} системы связи. Один из наиболее важных результатов теории, однако, - то, что при очень широких условиях{*состояниях*} никакие такие ограничения не наложены (это не говорит, однако, что кодер и декодер формы в рис. 4.2. Является всегда наиболее экономическим способом достичь данного выполнения{*работы*}). С практической точки зрения, разбивание кодера и декодера особенно удобно, так как это делает проект из кодера канала и декодера, фактически независимого от исходного кодера и декодера, используя данные в двоичном коде как интерфейс. Это, конечно, облегчает использование различных источников на том же самом канале.

Многое из современных основ теории коммуникации от работ систем связи и также желательность моделирования и сообщает и шум как случайные процессы. Винер был заинтересован обнаружением лучшего линейного фильтра, чтобы отделить сигнал от аддитивного шума с предписанной задержкой, и его работа имела важное влияние на последующее исследование в теории модуляции. Также интерес{*процент*} Винера на приеме с отрицательной задержкой (что,, предсказание) наряду с работой Колмогорова на предсказании если отсутствие шум имел важное воздействие{*столкновение*} на теорию контроля{*управления*}. Точно так же Kotelnikov был заинтересован обнаружением и оценкой сигналов в приемнике.