- •«Томский политехнический университет»
- •Е.С. Чердынцев мультимедийные сети
- •Глава 1. Введение в мультимедиа
- •1.1. Классификация мультимедиа
- •1.2. Текст
- •1.3. Звук
- •1.4. Графика и анимация
- •1.6.1. Характеристики реального времени (ограничения на задержки и нестабильность)
- •1.5. Видео
- •1.6. Требования к передаче мультимедиа по сетям
- •1.6.2. Требование высокой пропускной способности
- •1.6.3. Требования к ошибкам
- •1.6.4. Поддержка мультикаста
- •1.6.5. Управление сессиями
- •1.6.6. Безопасность
- •1.6.7. Поддержка мобильности
- •Глава 2. Поддержка распределенного мультимедиа трафика в Интернете
- •2.1. Поддержка трафика реального времени в Интернете
- •2.1.1. Задержки при обработке пакетов
- •2.1.2. Задержки при передаче пакетов
- •2.1.3. Задержка передачи
- •2.1.4. Задержки маршрутизации и обработки очередей
- •2.2. Требование высокой пропускной способности
- •2.3. Ошибки характеристик сети
- •2.4. Предлагаемые модели сервисов Интернет
- •2.4.1. Уточнение требований к сервисам и описанию трафика
- •2.4.2. Управление доступом
- •2.4.3. Управление трафиком
- •2.4.4. Классификация пакетов
- •2.4.5. Планирование пакетов
- •2.4.6. Потеря пакетов
- •2.4.7. Маршрутизация на основе QoS
- •2.5. Интегрированные сервисы
- •2.5.1. Классы гарантированного обслуживания
- •2.5.2. Сервис управления загрузкой
- •2.5.3. Сервис негарантированной доставки
- •2.5.4. Недостатки модели Intserv для Интернета
- •2.6. Дифферецированный сервис
- •2.6.1. Per Hop Behavior
- •2.7. Мультипротокольная коммутация по меткам
- •Глава 3. Расширение стека протоколов tcp/ip для поддержки функциональных требований распределенных мультимедийных приложений
- •3.1. Поддержка мультикаста
- •3.2. Управление сессиями
- •3.3. Безопасность
- •3.4. Мобильность
- •3.6. Session Initiation Protocol
- •Глава 4. Введение в rtp
- •4.1. Базовые принципы rtp
- •4.2. Стандартные элементы rtp
- •4.3. Связанные с rtp стандарты
- •Глава 5. Описание протокола rtp
- •5.1. Сессии rtp
- •5.2. Структура пакета rtp
- •5.3. Проверка качества пакета
- •5.4. Трансляторы и миксеры
- •Глава 6. Описание протокола rtсp
- •6.1. Компоненты rtcp
- •6.2. Передача пакетов rtcp
- •6.3. Формат пакетов rtcp
- •6.4. Безопасность и конфиденциальность
- •6.5. Проверка корректности данных
- •6.6. База данных участников сессии
- •6.7. Управление характеристиками времени
- •6.7.1. Отчетные интервалы
- •6.7.2. Базовые правила передачи
- •6.7.3. Процедура пересмотра вперед
- •6.7.4. Процедура пересмотра назад
- •6.7.5. Пересмотр пакетов bye
- •6.7.6. Общие проблемы реализации
- •Глава 7. Захват мультимедиа, проигрывание и управление характеристиками времени
- •7.1. Поведение отправителя
- •7.2. Захват мультимедиа и сжатие
- •7.2.1. Захват и сжатие звука
- •7.2.2. Захват и сжатие изображения
- •7.2.3. Использование предварительно записанной информации
- •7.3. Генерация пакетов rtp
- •7.3.1. Метки времени и модель времени rtp
- •7.3.2. Фрагментация
- •7.3.3. Заголовки, зависящие от формата данных
- •7.4. Поведение получателя
- •7.5. Получение пакетов
- •7.5.1. Получение пакетов данных
- •7.5.2. Получение управляющих пакетов
- •7.6. Буфер проигрывания
- •7.7. Декодирование, смешивание и проигрывание
- •7.7.1. Декодирование
- •7.7.2. Смешивание звука
- •Глава 8. Синхронизация звука и изображения
- •8.1. Поведение отправителя
- •8.2. Поведение получателя
- •8.3. Точность синхронизации
- •Глава 9. Компенсация ошибок
- •9.1. Компенсация потерь звука
- •9.1.1. Измерение качества звука
- •9.1.2. Замещение периодами тишины
- •9.1.3. Замещение шума
- •Глава 10. Исправление ошибок
- •10.1. Прямое исправление ошибок
- •Глава 11. Контроль перегрузок
- •11.1. Необходимость контроля перегрузок
- •10.1.1. Контроль четности
- •References
- •Multimedia networks
- •Published in author’s version
Глава 3. Расширение стека протоколов tcp/ip для поддержки функциональных требований распределенных мультимедийных приложений
В этой главе будут кратко рассмотрены протоколы, работающие на базе протокола TCP/IP и удовлетворяющие функциональные требования мультимедийных потоков. Затем будут представлены две архитектуры протоколов (H.323 и SIP), которые стандартизуют поддержку этих функциональных требований.
3.1. Поддержка мультикаста
Самым простым способом организации мультикаста в Интернете является простая посылка пакетов по заданным адресам [27]. Хост, готовый посылать сообщения в режиме мультикаста определенным группам мультикаста, информирует их ближайшие маршрутизаторы с использованием протокола IGMP (Internet Group Management Protocol). Мультикаст тривиален на одном сегменте Ethernet, где пакеты могут отсылаться на заданные MAC-адреса. Однако при доставке пакетов мультикаста через другие сети, маршрутизатор мультикаста нуждается в обмене информацией с соседними маршрутизаторами. Существует много различных алгоритмов, таких как "flooding", "spanning tree", "reverse path broadcasting" и "reverse path multicasting" для обмена информацией между маршрутизаторами. Некоторые из этих алгоритмов были использованы в динамических протоколах многоадресной маршрутизации, таких как Distance Vector Multicast Routing Protocol (DVMRP), Multicast extension to Open Shortest Path First (MOSPF), и Protocol Independent Multicast (PIM) [28]. На основе информации о маршрутизации, полученной с помощью одного из этих протоколов, маршрутизаторы мультикаста будут решать, следует ли направить этот пакет по своей сети или нет.
Другой подход называется MBone или Multicast Backbone. Mbone – по существу виртуальная сеть, создаваемая над фрагментами Интернет. В MBone «острова» мультикаста связаны друг с другом виртуальными ссылками, называемые «туннелями». Именно через эти туннели сообщения мультикаста передаются через обычные части Интернет. Для пересылки пакетов мультикаста через эти туннели они инкапсулируются как пакеты IP-over-IP (с уровнем протокола до 4) и выглядят как обычные пакеты.
ITU-T H.323 и IETF Session Initiation Protocol (SIP), как будет рассмотрено позже, поддерживают мультикаст посредством использования Multi-point control unit, что обеспечивает функциональные возможности, необходимые для аудио/видео конференц-связи. В [29] дается обзор вопросов QoS при мультикасте.
3.2. Управление сессиями
Мы обсудим протоколы, которые были стандартизированы для удовлетворения различных аспектов управления сессиями.
Описание сессии (Session Description Protocol – SDP) [30] [31], разработанный IETF, может быть использован для обеспечения функциональности описания сессии (описание типа мультимедиа, способ его кодирования в данной сессии). SDP кодирует описание мультимедиа в простом текстовом формате. Сообщение SDP состоит из серии строк, называемых полями, имена которых сокращены до одной буквы в нижнем регистре, и расположенных в заданном порядке для облегчения процесса анализа. Поля заполняются по шаблону attribute_type = значение. Пример сообщения SDP показан на рис. 3.1. Значение всех атрибутов записано в левой колонке, а само сообщение – в правой.
Рис. 3.1: Пример сообщения SDP
Оповещение о сессии (Session Announcement). Протокол оповещения о сессиях (Session Announcement Protocol – SAP) [32][33] используется для оповещения о предстоящих сессиях мультикаста. Оповещатель SAP периодически рассылает пакеты оповещения зарегистрированным участникам мультикаста по их адресам и портам (обычно порт 9875). Одну сессию могут анонсировать несколько оповещателей, гарантируя надежность доставки данной информации в условиях возможной потери пакетов и выхода из строя отдельных оповещателей. Период времени между повторениями объявления выбирается так, чтобы суммарный поток сообщений в сети, используемой всеми оповещателями из одной группы SAP, оставался ниже предварительно настроенного предела. Каждый оповещатель получает и другие оповещения, чтобы определить общее число сессий в конкретной группе. SAP объявляет о предстоящих многопользовательских сессиях мультикаста и начинает свою работу задолго до ее старта. SAP также содержит механизмы обеспечения целостности сессии оповещений, проверки их подлинности и шифрования.
Идентификация сессий (Session Identification). В обычном Интернете каждый поток (или сессия) могут быть идентифицированы кортежом <Src Ip, Src Port, Dst IP, Dst Port, Protocol>. Таким образом, для каждой сессии может быть установлен индивидуальный сокет транспортного уровня. Но если возникает необходимость объединить несколько сессий вместе (для сокращения расходов), то для этого нет доступного механизма. Следовательно, существует явная необходимость в мультиплексировании различных потоков одном сокете транспортного уровня. Эта функция аналогична " Session Layer " в 7-уровневой модели OSI, которая отсутствует в стеке протоколов TCP/IP, используемого в Интернете. Идентификацию сессии можно сделать с помощью RTP, что описывается более подробно в следующих главах.
Управление сессиями (Session Control). Вся функциональность управления сессиями может быть обеспечена использованием комбинации RTP, RTCP и RTSP.
Real-time Protocol (RTP) [35] обычно запускается в верхней части UDP. В частности, фрагмент аудио/видео данных, сгенерированный на стороне мультимедийного приложения, инкапсулируется в пакет RTP, который в свою очередь инкапсулируется в UDP. Функциональность RTP должна быть интегрирована в приложение. Функции, обеспечиваемые RTP, включают:
Упорядочивание (Sequencing). В пакет RTP включается поле номера пакета, помогающее предотвратить потерю пакетов.
Идентификация передаваемой информации (Payload Identification). Используется для динамического изменения схем кодирования данных при необходимости изменения пропускной способности. Для обеспечения данной функциональности этот идентификатор включается в каждый пакет RTP.
Индикация фреймов (Frame Indication). Звук и видео пересылаются в логических единицах, называемых фреймами. Для индикации начала и конца фрейма используется маркер фрейма (frame marker).
Идентификация источника (Source Identification). В сессиях мультикаста принимают участие много пользователей. Требуется идентифицировать автора фрейма. Для этого используется идентификатор SSRC (Synchronization Source).
Синхронизация фрагментов мультимедиа (Intramedia Synchronization). Для компенсации нестабильности передачи разных фрагментов мультимедиа в рамках одного потока RTP использует метки времени, необходимые для организации работы буферов проигрывания.
Дополнительная информация, описывающая тип мультимедиа и схемы сжатия, может быть также вставлена в пакеты RTP, используя заголовки профиля (profile headers) и расширения (extensions).
RTCP [20] является протоколом управления, работающим совместно с RTP и обеспечивающим участников сессии мультикаста статистикой о количестве переданных пакетов, числе потерянных пакетов, показателях нестабильности работы сети и времени полной передачи. Эта информация может быть использована источником для регулирования скорости передачи данных. Информация об адресах электронной почты, именах и номерах телефонов, включаемая в пакеты RTCP, позволяет пользователям идентифицировать других участников сессии.
Real-Time Streaming Protocol (RTSP) [35] является внешним управляющим протоколом, дающим конечному получателю такую функциональность, как пауза, перемотка и т.п.
Работа протокола RTP над протоколом UDP обеспечивает дополнительную функциональность, требуемую для перестановки UDP пакетов и использования в них меток времени. Однако ограничения протокола UDP не преодолеваются полностью при использовании протокола RTP. Так ненадежность UDP остается, и по прежнему нет гарантии доставки переданных пакетов получателю. С другой стороны, гарантии отсутствия ошибок в протоколе TCP создают серьезные задержки времени, которые делают его бесполезным для приложений реального времени.
Мулабегович [36] предлагает альтернативу протоколу RTP –Lightweight Streaming Protocol (LSP). Этот протокол так же размещается в верхней части транспортного уровня и основан на протоколе UDP. LSP, также как и RTP, обеспечивает нумерацию пакетов и добавление в них меток времени для упорядочивания пакетов и управления буфером получателя. Однако, в противоположность UDP и RTP, протокол LSP разрешает ограничение использования повторной пересылки для минимизации перегрузок передающей сети. Это достигается использованием негативной информации о потере пакетов и удовлетворением требования максимальной задержки, устанавливаемого при передаче информации в реальном времени.
