фон

Многие разработчики надеются иметь предварительное представление о WebRTC, RTSP, RTMP и SRT, а также знать, какие решения выбрать для различных сценариев. В этой статье дается общее представление о различиях между ними.

WebRTC

Когда дело доходит до WebRTC, я считаю, что первое, о чем думают многие разработчики, — это низкая задержка. WebRTC (Web Real-Time Communication) — это технология связи в реальном времени, которая позволяет сетевым приложениям или сайтам осуществлять просмотр без использования посредников. Соединение «точка-точка» (Peer-to-Peer) между устройствами для реализации передачи видеопотоков, аудиопотоков или других произвольных данных. Ниже приводится подробное введение в WebRTC:

1. Технические характеристики

1. В реальном времени и высокое качество：
   • WebRTC обеспечивает недорогую и высококачественную связь в реальном времени, упрощая аудио- и видеосвязь. Приложения реального времени, такие как видео, работают более плавно и естественно.
2. одноранговое общение：
   • WebRTC поддерживает установление соединений «точка-точка» напрямую между двумя браузерами, повышая эффективность связи и безопасность.
3. Криптографически безопасный：
   • WebRTC через SRTP (безопасный Real-Time Transport протокол) и DTLS (датаграмма Transport Layer Безопасность) для защиты передаваемых аудио- и видеоданных и обеспечения безопасности и конфиденциальности содержимого связи.
4. Кроссплатформенная совместимость：
   • WebRTC может работать на различных операционных системах и устройствах.,Включая настольные компьютеры, мобильные устройства, смарт-телевизоры и т. д.,Предлагая более широкий спектр совместимости.
5. адаптивный битрейт：
   • WebRTC поддерживает передачу с адаптивным битрейтом.,Автоматически настраивайте качество звука и видео в зависимости от условий сети.,Обеспечьте плавное воспроизведение в различных сетевых средах.

2. Сценарии применения

Технология WebRTC широко используется во многих областях, включая, помимо прочего:

• Видеоконференции и онлайн-встречи：Создавайте в режиме реального времени Видеоконференции и приложение онлайн-встречи, обеспечивающее многостороннее общение и функции совместного использования экрана.
• онлайн-образование：строитьонлайн-образованиеплатформа,Поддержка дистанционного обучения и интерактивного общения.
• Живое видео：достичь в режиме реального времени Живое видео, поддерживает чат в реальном времени и интерактивные функции.
• обслуживание клиентов：строить онлайнобслуживание клиентовплатформа,Включите голосовую, видео и текстовую связь в реальном времени,Обеспечьте лучший клиентский опыт.
• социальная сеть：используется длясоциальная Живой голос, видеозвонки в сети, расширенная социальная Интерактивность сети.
• Умное оборудование и умный дом：как дрон、камера наблюдения、Интеллектуальные голосовые устройства и т. д.,Осуществить дистанционное управление и передачу данных.

3. Техническая архитектура и API

Техническая архитектура WebRTC обычно включает в себя следующие части:

• Уровень API веб-разработчика：Предоставить на основеJavaScriptизAPI,Разрешить разработчикам напрямую вызывать функции связи в реальном времени, предоставляемые браузером в веб-приложениях.
• Уровень реализации поставщика браузера：Производители браузеров могут настраивать реализации в соответствии со стандартами.WebRTCиз Первый этажтехнология,Например, коллекция аудио и видео、Кодек、Сетевая передача и т. д.
• Уровень адаптации оборудования：Аппаратное обеспечениеиз Аудио коллекцияирендеринг、захват видео、сетьIOи другие модули,Эти модули обычно перегружаются.,увеличитьWebRTCизгибкостьи Кросс-платформенный。

4. Преимущества и недостатки

преимущество：

• удобный：Пользователям не нужно устанавливать какие-либо плагины или программное обеспечение.,Общение в режиме реального времени может осуществляться через браузер.
• бесплатно：GoogleОткрытый исходный кодWebRTCтехнология,Никаких комиссий не взимается.
• Мощная способность сверления отверстий：поддерживатьNATи Проникновение межсетевого экранатехнология,Такие как STUN, ICE, TURN и т. д.

недостаток：

• Отсутствие проектирования и развертывания серверных решений.：нуждатьсяразвивать Спроектировано самостоятельнои План сервера управления。
• Качество передачи трудно гарантировать：на основеP2Pиз Конструкция трансмиссии трудно гарантировать и сложна.из В среде Интернетаиз Качество передачи。
• Проблемы адаптации на стороне устройства：существоватьразные устройстваи Операционная система может хранитьсуществоватьприспособлениесексвопрос,Например, эхо, сбой записи и т. д.
• Недостаточная поддержка нативной разработки.：Хотя ХОРОШОиспользуется дляNativeразвивать,Но конструкция рамы сложная,Детализация API более тонкая.

RTSP

RTSP (протокол потоковой передачи в реальном времени) — это протокол управления сетью, используемый для управления серверами потокового мультимедиа для обеспечения воспроизведения в реальном времени и управления мультимедийными потоками, такими как аудио и видео. Сам RTSP не передает данные потокового мультимедиа, а служит протоколом для управления передачей потокового мультимедиа. Обычно он работает в сочетании с такими протоколами, как RTP (транспортный протокол реального времени) и RTCP (протокол управления транспортировкой в ​​реальном времени).

Взяв в качестве примера модуль Daniu Live SDK, Hikvision 2560*1440, скорость передачи данных 8M, используя в качестве примера проигрыватель vlc и SmartPlayer Daniu Live SDK, эффект задержки, RTSP-плеер Daniu Live SDK, имеет задержку 100-150 мс. , 2-3 секунды для vlc.

Основные возможности RTSP

1. контроль медиапотока：
   • RTSP предоставляет функции управления медиапотоками, такие как воспроизведение, пауза, перемотка вперед, назад, позиционирование и другие операции. Это позволяет клиенту гибко управлять воспроизведением медиапотоков по мере необходимости.
2. Масштабируемость：
   • RTSP поддерживает несколько транспортных уровней протокола,Такие как TCP и UDP,Соответствующий метод передачи можно выбрать в соответствии с сетевой средой и требованиями приложения. в то же время,RTSP также поддерживает несколько кодеков и медиаформатов.,С хорошей Масштабируемостью.
3. Кросс-платформенный：
   • RTSP — текстовый протокол.,Легко анализировать и расширять,Может быть реализован на разных операционных системах и платформах. Это делает RTSP распространенным выбором в области потоковой передачи мультимедиа.
4. управление сеансом：
   • RTSP поддерживает концепцию сессий,Связи сеансов между несколькими медиапотоками можно устанавливать и управлять ими. Это позволяет RTSP обрабатывать сложные сценарии мультимедийных приложений.,Такие как многочисленные вечеринки видеоконференций и так далее.

Сценарии применения RTSP

RTSP широко используется в различных сценариях передачи потокового мультимедиа, включая, помимо прочего:

• Сетевое видеонаблюдение：в системах видеонаблюдения,RTSP используется для управления потоковым видео между камерами и потоковыми серверами.,Реализуйте функции удаленного мониторинга и воспроизведения.
• интернет-трансляция：существоватьинтернет-трансляцияв системе,RTSP используется для управления воспроизведением и распространением широковещательных медиапотоков.,Убедитесь, что зрители могут получать транслируемый контент и управлять им в режиме реального времени.
• Потоковая передача по запросу：существовать Потоковая передача по запросув системе,RTSP используется для реализации запросов пользователей по требованию и управления воспроизведением медиафайлов.,Обеспечьте персонализированный опыт воспроизведения.
• видеоконференция：существоватьвидеоконференцияв системе,RTSP можно использовать для управления передачей и синхронизацией многосторонних видеопотоков.,Убедитесь, что встреча прошла гладко.

Связь между RTSP, RTP и RTCP

RTSP часто используется вместе с RTP и RTCP для реализации передачи и управления потоковым мультимедиа. Среди них RTP отвечает за передачу мультимедийных данных в реальном времени, RTCP отвечает за передачу управляющей информации (например, скорость потери пакетов, задержка и т. д.), а RTSP отвечает за контроль установления, обслуживания и прекращения передачи данных. всю медиа-сессию. Все трое работают вместе, чтобы реализовать передачу потокового мультимедиа в реальном времени и управление им.

Сравнение WebRTC, RTSP, RTMP

RTMP

RTMP（Real Time Messaging Протокол) — это протокол обмена сообщениями в реальном времени, который в основном используется для эффективной передачи аудио, видео и данных между потоковыми серверами и клиентами. RTMP изначально был разработан Adobe для использования во Flash. PlayerЯпонскийAdobe Media Сервер (теперь Adobe Media Сервисы) для передачи потокового медиаконтента. Хотя Adobe Flash PlayerЯпонскийAdobe Media Serverизвозобновлятьиподдерживатьпостепенно снизился,Но протокол RTMP по-прежнему широко используется.,Существует множество реализаций RTMP-серверов и клиентов с открытым исходным кодом и коммерческих реализаций.

Если взять в качестве примера модуль Daniu Live SDK, платформа Android запустила облегченную службу RTSP и потоковую передачу RTMP соответственно, а Windows воспроизводит потоки RTSP и RTMP соответственно. Независимо от того, RTMP или RTSP, задержка составляет 100-150 мс.

Основные возможности RTMP

1. На основе TCP：RTMPиспользоватьTCPпротоколвыполнить передачу данных,Это означает, что он обеспечивает более надежный транспорт, чем протокол на основе UDP (например, некоторые части WebRTC).,Но может работать неэффективно в периоды высокого трафика или перегрузки сети.
2. в реальном времени：хотяRTMPНа основе TCP, но он предназначен для поддержки потоковой передачи в реальном времени. Используя соответствующие механизмы буферизации и управления потоком, RTMP может обеспечить потоковую передачу практически в реальном времени.
3. совместимость：RTMPсуществовать Индустрия потокового мультимедиа имеет обширнуюизсовместимость,Многие существующие потоковые платформы и устройства поддерживают RTMP. Это делает RTMP популярным выбором для передачи потокового контента на несколько платформ и аудиторий.
4. Легко интегрировать：RTMPпротоколотносительно простой,И есть много Открытый исходный коди Бизнесиз Библиотекаи Инструменты могутиспользуется дляRTMPизкодирование、декодированиеипередача инфекции。Это делаетRTMPЛегко интегрировать в существующие приложения и системы.
5. безопасность：ХотяRTMPСам по себе не обеспечивает функцию шифрования,Но его можно улучшить, инкапсулируя RTMP-соединения на транспортном уровне (например, используя HTTPS или TLS) или на уровне приложений (например, используя расширения шифрования для RTMP).

Однако у RTMP есть и некоторые недостатки, особенно в современных средах потоковой передачи:

• Задерживать：потому чтоRTMPНа основе TCP и обычно использует буферы большего размера для обеспечения надежной передачи данных, поэтому он может иметь более высокую надежность, чем некоторые другие протоколы связи в реальном времени, такие как WebRTC.
• эффективность использования полосы пропускания：RTMPНаверное, не так современно, как некоторыепротокол（нравитьсяSRT）существоватьэффективность использования полосы Эффективен с точки зрения пропускания. Это может привести к снижению качества потоковой передачи в средах с ограниченной полосой пропускания.
• Зависимости Adobe：хотяRTMPсейчассуществоватьда Открытый исходный кодиз,и существует множество реализаций, отличных от Adobe.,Но изначально он был разработан Adobe,и тесно связаны с продуктами и услугами Adobe. В некоторых случаях это может привести к использованию технологий Adobe.

Сценарии применения RTMP

1. Прямая видеотрансляция

RTMPпротоколсуществовать Живое поле видео имеет широкий спектр применения. Через протокол RTMP якорь может передавать видеопоток в реальном времени на сервер потокового мультимедиа, а аудитория может смотреть его напрямую через различные клиенты (например, веб-браузеры, мобильные приложения и т. д.). трансляция контента. Функция низкой задержки RTMP позволяет передавать аудио- и видеоданные в режиме реального времени, что очень подходит для спортивных мероприятий. трансляция, прямые трансляции новостей, онлайн-образование, прямые социальные сети трансляция и другие сцены, требующие взаимодействия в реальном времени.

2. Видео по запросу

Кроме прямого трансляция,Протокол RTMP также используется в домене видео по запросу. По RTMPпротоколу,Видеофайлы можно передавать частями.,и воспроизвести его на клиенте,Он также поддерживает быструю перемотку видео вперед, назад и другие операции. Этот метод удовлетворяет спрос пользователей на видео высокой четкости по запросу.,Подходит для онлайн-видеокурсов, платформ по запросу фильмов и телевидения и других сценариев.

3. Общение в режиме реального времени

RTMP-протокол из-за его хорошего качества реальном время и надежность, также широко используется в общении в реальном поле времени. В видеоконференциях, онлайн-обслуживании клиентов и социальном программном обеспечении протокол RTMP может использоваться в качестве передачи видео- и аудиоданных, обеспечивая общение. в реальном стабильность и плавность времени.

4. Другие потоковые приложения

Протокол RTMP также может использоваться в других сценариях потоковых приложений, таких как передача с низкой нагрузкой в ​​службах IPTV (интерактивное интернет-телевидение), передача потокового аудио и видео в режиме реального времени с удаленной сцены в приложениях виртуальной реальности (VR) и дополненной реальности (AR). и т. д.

несмотря на это,RTMP по-прежнему остается очень популярным и важным протоколом в индустрии потокового вещания.,Особенно, когда потоковый контент необходимо распространить на несколько платформ и аудиторий. С развитием технологий и появлением новых технологий, таких как WebRTC и SRT.,RTMP может постепенно быть заменен каким-то более современным и эффективным протоколом.,Но в обозримом будущем,Он продолжит играть важную роль в индустрии потокового вещания.

SRT

SRT (Secure Reliable Transport) — протокол передачи видео с открытым исходным кодом.,Создан для эффективной, надежной и безопасной потоковой передачи видео через Интернет. SRT разработан Haivision и имеет открытый исходный код.,Он сочетает в себе эффективность UDP с надежностью TCP.,Также добавлены такие функции, как шифрование, восстановление после ошибок и мультиплексирование.,Чтобы справиться со сложными сетевыми средами и сценариями передачи видео в реальном времени с высокими требованиями.

Основные особенности СРТ

1. Низкий Задерживать：
   • SRT обеспечивает недорогую потоковую передачу видео за счет оптимизации передачи по сети и снижения накладных расходов, что подходит для связи и связи в реальном времени. трансляция и другие приложения.
2. Высокая надежность：
   • SRT сочетает в себе эффективность UDP с надежностью TCP, обеспечивая целостность и скорость поступления пакетов данных с помощью механизмов восстановления ошибок (таких как повторная передача и прямое исправление ошибок FEC).
3. безопасность：
   • SRT поддерживает зашифрованную передачу, которая может защитить контент потокового видео от атак «человек посередине» и других угроз безопасности.
4. многолучевая передача：
   • SRTподдерживатьмноголучевая передача,Может использоваться при плохих условиях сети.,Отправлять пакеты по нескольким путям,提高передача инфекциииз Стабилизироватьсексинадежныйсекс。
5. гибкость：
   • SRT поддерживает множество кодеков и медиаформатов и может гибко адаптироваться к различным сценариям приложений и устройствам.
6. Открытый исходный код и кроссплатформенность：
   • SRT — проект с открытым исходным кодом.,Доступно на нескольких операционных системах и платформах.,удобные разработчики выполняют интеграцию и развертывание.

Сценарии применения SRT

SRT широко используется в различных сценариях, требующих эффективной, надежной и безопасной передачи видеопотоков, включая, помимо прочего:

• Живое видео：существовать Живое видеополе,SRT может обеспечить низкую задержку и высококачественную передачу видео.,Улучшите впечатления аудитории от просмотра.
• удаленное производство：существоватьудаленное сцена производства,SRT может поддерживать передачу в реальном времени и синхронизацию нескольких видеопотоков.,Удобная производственная группа работает удаленно.
• видео по запросу：ХотяSRTосновнойиспользуется для实时视频передача инфекции,Но его также можно использовать в сценах видео по запросу.,Предоставляет услуги потокового видео высокого качества.
• видеонаблюдение：существоватьвидеонаблюдениеполе,SRT может обеспечить надежную передачу видеоданных в режиме реального времени.,Повышение эффективности систем мониторинга и безопасности.

Сравнение SRT с другими протоколами

• Сравните с RTSP：RTSPосновнойда Что-то вродеконтрольпротокол,Используется для управления потоковой передачей мультимедиа с потоковых серверов.,А SRT - это своего рода протокол передачи,Сосредоточьтесь на надежной и безопасной передаче видеопотоков в режиме реального времени. RTSP можно комбинировать с такими транспортами, как протокол SRT.,Реализуйте более сложные приложения потокового мультимедиа.
• Сравните с RTMP：RTMP（Real Time Messaging протокол) — это своего рода основе Транспортный протокол TCP, хотя также широко используется в Живом видео,Однако он плохо работает в сетевых средах с высокой задержкой и высокой скоростью потери пакетов. SRT оптимизирует передачу данных по сети и добавляет механизмы восстановления после ошибок.,Это может обеспечить лучший эффект передачи в более сложных сетевых средах.

Подвести итог

Как технология связи в реальном времени, WebRTC обладает преимуществами высококачественной двухточечной связи в реальном времени, безопасности шифрования, межплатформенной совместимости и т. д. и широко используется во многих областях. Однако у него также есть некоторые недостатки и проблемы, на которые разработчикам необходимо обратить внимание и решить их при его использовании.

RTSP как протокол управления сетью,Он имеет широкий спектр применений в области потоковой передачи мультимедиа. Он обеспечивает функции управления медиапотоками.,Поддерживает несколько транспортных уровней и медиаформатов.,С хорошей Масштабируемостью и Кросс-платформенным. Работая с такими протоколами, как RTP и RTCP,RTSP обеспечивает высококачественную потоковую передачу и управление.,Удовлетворите потребности различных сценариев приложений потокового мультимедиа.

SRT — это протокол передачи видео с открытым исходным кодом, благодаря низкой нагрузке, высокой Такие функции, как надежность, безопасность и гибкость, обеспечивают надежную поддержку передачи видео в реальном времени. это в Живом видео、удаленное производство, видеонаблюдение и другие области имеют широкие перспективы применения. Поскольку технология SRT продолжает развиваться и совершенствоваться, я считаю, что она будет играть важную роль во многих областях.

Проще говоря:

Если вы преследуете в реальном времении Браузерсовместимость：WebRTCэто первый выбор,Потому что он поддерживает одноранговое общение между браузерами.,И низкая задержка.

Если вам нужно управлять воспроизведением потокового мультимедиа：RTSPдаподходящийизвыбирать,Потому что он обеспечивает богатые функции управления.

При использовании в прямой трансляции：RTMPиз-за его широкогоизCDNподдерживатьи Простойизпротоколвыполнить,Все еще основной выбор.

Если вы стремитесь к высококачественной передаче видео：SRTпредоставил Низкий Задерживать、Высокая надежностьиз Гарантировать,да Живое видео и удаленный мониторинг и другие области по выбору.

напишите здесь,Ответьте на вопросы многих разработчиков,Почему WebRTC и SRT так хороши,Daniel прямая трансляцияSDK поддерживает только кросс-платформенную RTMP-отправку, воспроизведение RTMP, упрощенные службы RTSP и доступ к устройствам GB28181? Да,WebRTC и SRT также имеют применимые сценарии.,WebRTC очень зрелый,На самом деле, мы уже делали СТО раньше,Просто не обнародовано,На основе нашего текущего опыта,Он может достичь первого уровня RTMP-отправки, воспроизведения RTMP, воспроизведения RTSP, RTSP-отправки RTMP, облегченной службы RTSP и модуля доступа к устройствам GB28181.,Нелегко сказать правду,С ростом спроса на аудио и видео в будущем,,Мы также внесем соответствующие коррективы и последующие действия.,Идите в ногу со временем,Обеспечьте лучшееиз Низкий ЗадерживатьЗвук Живое видео решение。

​