- •1. Краткая характеристика курса (теории информации), цель и задачи.
- •2. Амплитудная, частотная и фазовая модуляция.
- •3. Сообщение как случайный процесс
- •4. Сигналы ам и чм в виде временного, спектрального и векторного вида.
- •5. Величина Хартли. Количественная оценка информации.
- •6. Спектральное отличие сигналов чм и фм и частота полосовой ширины.
- •7. Представление об информации.
- •9. Распространение информации по дискретному каналу без помех.
- •10. Способы дискретной модуляции.
- •11. Пропускная способность канала без помех.
- •12. Исправление одиночных или обнаружение двойных ошибок.
- •13. Теорема пропускной способности дискретного канала без помех.
- •14. Циклические коды.
- •15. Математическая модель дискретного канала без помех.
- •16. Методы построения циклических кодов.
- •17. Дискретные каналы с помехами. Понятие помех.
- •Естественные помехи
- •Искусственные помехи
- •18. Рентабельность теоремы о кодировании.
- •19. Скорость передачи информаци и пропускная способность.
- •20. Сообщающие коды об ошибках.
- •23. Пропускная способность дискретных каналов с помехами.
- •24. Циклические линейные коды.
- •25. Теоремы для пропускной способности дискретного канала с помехами.
- •26. Критерии оптимального приёма информации
- •27. Математическая модель дискретного канала с помехами.
- •29. Непрерывный канал. Передача информации в непрерывном канале.
- •30. Синтез Алгоритмов и схем оптимальных приёмников, корреляционный приёмник.
- •31. Дискретизация и принципы восстановления информации.
- •32. Разность модуляции и приема.
- •33. Разложение непрерывного сигнала в ортогональные ряды.
- •34. Многоканальная связь.
- •35. Ряды Фурье и применение их в технике связи.
- •36. Методы частотного, временного и фазового разделения сигналов.
- •37. Теорема Котельникова (основная теорема Шеннона).
- •38. Разделение сигналов по форме (кодовое разделение).
- •39. Пропускная способность непрерывного канала.
- •40. Комбинационное разделение.
- •41. Модель непрерывного канала связи.
- •42.Цифровые методы распространение непрерывной информации.
- •43. Методы формирования и преобразования сигналов в системе связи.
- •44. Аналого-цифровые и цифро-аналоговые преобразователи.
- •45. Модуляция гармонических сигналов.
- •46. Импульсно-кодовая модуляция (икм). Дифференциальные икм.
- •47. Цифровые методы передачи информации.
- •48. Дискретизация по времени и квантование.
- •49. Краткая характеристика курса (теории информации), цель и задачи.
- •50. Теорема об эффективном кодировании.
- •51. Общие принципы использования избыточности
- •52. Понятие помехи. Методы борьбы с помехами.
- •53. Корректирующая способность кода.
- •54. Задачи дискретизации (общая постановка)
- •55. Геометрическая интерпретация блоковых корректирующих кодов.
- •56. Структура кадра икм-30
- •57. Линейные коды
- •58. Критерии оптимального приема сообщений
- •59. Определение проверочных равенств
- •60. Оптимальные когерентные демодуляторы на согласованных фильтрах.
- •61. Составление таблиц опознавателей.
- •62. Оптимальные когерентные приемники (алгоритмы и структурные схемы).
- •63. Математическое введение к линейным кодам.
- •64. Дискретизация по методу наибольшего отклонения.
- •65. Бчх коды.
- •66 Критерии качества восстановления (кода)
- •67. Блоковые коды.
- •68. Свойства энтропии.
- •70. Методы модуляции носителей информации.
- •71. Коды Голея.
- •72. Виды помех.
- •73. Коды Шеннона-Фано-Хаффмена.
- •Алгоритм вычисления кодов Шеннона-Фано
- •74. Математическая модель дискретного канала с помехами.
- •75 Коды Рида-Соломона
- •76. Теорема Котельникова (основная теорема Шеннона)
- •77. Формы представления детерминированных сигналов.
- •78. Модель непрерывного канала.
- •79. Основные этапы обращения информации.
- •2 Достоверность и полнота
- •3 Обработка и систематизация
- •4 Интерпретация
- •80. Балансовая и однополосная модуляция.
37. Теорема Котельникова (основная теорема Шеннона).
Теорема Котельникова. Теорема устанавливает принципиальную возможность полного восстановления детерминированной функции с ограниченным спектром по ее отсчетам и указывает предельное значение интервала времени между отсчетами, при которой такое восстановление еще возможно. Она формулируется следующим образом: функция u(t), допускающая преобразование Фурье и имеющая непрерывный спектр, ограниченный полосой частот от 0 до Fc = c/(2), полностью определяется дискретным рядом своих мгновенных значений, отсчитанных через интервалы времени
Физическая основа теоремы выявляется при рассмотрении связи между формой функции и шириной ее спектра. Только в случае, когда спектр функции безграничен, ее значения в сколь угодно близкие моменты времени могут изменяться произвольно (корреляционная связь между ними отсутствует). Сокращение высокочастотной части спектра до граничной частоты ω1 равнозначно устранению из временной функции выбросов, которые могли быть сформированы этими высокочастотными составляющими. При меньших граничных частотах 2, и 3 имеем более сглаженные функции времени. Поскольку значения этих функций в моменты времени u(t1) и u(t1+Δt) в пределах некоторого интервала Δt не могут изменяться существенно, можно ограничиться значениями функции, взятыми через интервалы Δt (отсчетами).
38. Разделение сигналов по форме (кодовое разделение).
Адрес получателя сообщения (номер канала) в асинхронных системах определяется формой соответствующего составного сигнала, что также обеспечивает кодовое разделение каналов.
Сигналы ИВК применяют для повышения помехоустойчивости в аналоговых радиолиниях с временным разделением каналов.
Малое значение коэффициента взаимной корреляции псевдослучайных видеосигналов позволяет осуществить кодовое разделение каналов.
Шумоподобные сигналы с фазовой манипуляцией используются для разделения лучей при многолучевом распространении радиоволн в системах связи -и радионавигации, для подавления сосредоточенных помех и построения систем скрытой связи.
При частотном разделении каналов используются гармонические поднесущие колебания, при временном разделении — импульсные поднесущие в виде последовательности видеоимпульсов с периодом повторения Т„.
Все передатчики изучают на одной частоте, НО перед началом очередной посылки они посылают, скажем, уникальные код. Приёмник его принимает и знает, что это сигнал от конкретного передатчика (в действительности немного не так). Этот метод называется кодовым разделение каналов. Житейский пример: та же бочка. В этом случае жёлоб один, но по нему текут жидкости разной плотности, чтобы они не смешивались. На приёмном конце мы по плотности жидкости определим, откуда она.
39. Пропускная способность непрерывного канала.
Рассмотрим наиболее распространенный случай так называемого двоичного симметричного канала. При этом m = 2 (Iog2m = I), а вероятности ошибки "переход "1" в "0"" "переход "0" в "1" " одинаковы.
Если теперь рассмотреть в качестве случайного события передачу разряда кода с ошибкой (вероятность р0), то для определения энтропии, получим:
Нх/у = Ну/х = -ро Iog2p0 - (1 - ро) Iog2(l - ро)
С=[1-p0log2p0-(1-p0)log2(l-p0)]/tx
Таким образом, пропускная способность симметричного двоичного канала с помехами определяется только скоростью передачи разрядов кода (Vx = 1/tx) и вероятностью ошибок.
Клод Шеннон показал, что за счет кодирования пропускную способность канала с помехами также можно использовать максимально полно (напомним, что сама она будет ниже, чем у канала без помех).
Способ кодирования, который позволяет этого добиться, основан на использовании избыточных кодов, когда каждый информационный блок защищается контрольными разрядами и чем больше длина блока, тем меньше удельный вес этих избыточных разрядов, позволяющих обнаружить и исправить ошибки.
Источник И передает в канал непрерывное сообщение Z(t).
Формирователь сигналов Фс преобразует его в сигнал X(t), приспособленный для передачи по аналоговому каналу.
В линии связи ЛС на сигнал воздействуют случайные аддитивные помехи e(t) (для помех такого типа справедливо соотношение Y(t)=X(t)+e(t)).
Устройство распознавания сигнала восстанавливает сообщение Z(t) по полученному Y(t).
В этой схеме стадия кодирования вообще не рассматривается. Однако подход основан на тех же принципах, что и для дискретного канала, потому нам целесообразно рассмотреть этот вопрос именно здесь.
Вернемся к определению пропускной способности канала связи:
Сбп = max{Iху}/tx=max{Hx}/tx
Величина tx в нашем случае соответствует шагу дискретизации сигнала dt. Согласно теореме Котельникова (к которой мы вернемся позже), непрерывный сигнал можно полностью восстановить по его дискретным отсчетам, если шаг дискретизации dt вдвое меньше периода самой высокочастотной составляющей fm сигнала (dt = l/2fm). Учитывая, что любой физический канал связи всегда имеет ограниченную полосу частот, которые он в состоянии пропустить, величину fm (а следовательно и dt) можно определить исходя из характеристик канала.
Если значение dx конечно, то непрерывный канал можно рассматривать как дискретный с объемом алфавита m=xm/dx+1. Если к тому же в канале отсутствуют помехи (Нх/у = 0), то соотношение можно преобразовать к виду
C=max{Hx}/dt=2fm*Iog2m=2fm*Iog2(xm/dx+1)
Отсюда видно, что пропускная способность непрерывного канала без помех (dx -> 0) стремится к бесконечности. Однако, в реальном канале помехи присутствуют всегда, при этом сколько бит информации удается "нагрузить" на один дискретный отсчет, зависит от соотношения мощности полезного сигнала на входе приемника и помехи Рс/Рп.
Клод Шеннон показал, что в случае наиболее "неприятной" помехи типа "белый шум", чья мощность равномерно распределена во всей полосе частот канала, справедливо соотношение:
Сп = fm log2(Pc/Pn+1)
Итак, пропускная способность непрерывного канала с помехами:
-пропорциональна ширине полосы частот канала fm;
-возрастает с увеличением отношения полезный сигнал/помеха (в этом случае будет уверенно распознаваться на фоне помех);
-не равна нулю даже при Рс<<Рп (то есть, передачу информации принципиально можно вести сигналами более слабыми, чем помехи).
