2016年陌陌、映客等直播平台陆续上线连麦,如今连麦已经成为主流直播平台标配。声网于2016年全球率先推出的多人连麦、纯语音连麦等多种玩法,半年时间内,就与几乎所有全球主流直播平台达成深度合作,如陌陌、花椒、触手、视吧、KK、荔枝FM、咸蛋家,Meetme,Flurry Live,Livestar,Yalla等等。

从技术架构上来说,目前市场上存在的连麦方案有三种:

三种连麦方案

SD-RTN™

这是声网的连麦架构,直播连麦的鼻祖。基于UDP,主播端、连麦端、观众端都在基于SD-RTN™进行实时通信,大大降低延时。主播端和连麦端也可以转码到CDN推流。

RTMP改进方案

基于TCP协议,基本思路是:主播接受连麦嘉宾的视频,在本地合图;主播和连麦嘉宾的视频同时传到服务端合图,然后通过CDN推到观众端。

WebRTC改进

主播和连麦嘉宾,基于WebRTC进行“视频会议”,将“视频会议”在服务端合图后推到CDN进行分发。

三种不同的架构,在连麦表现上,有独特指标来区隔

1. 低延时

连麦中,最重要的元素,就是低延时。连麦的本质是视频通话,而视频通话最重要的指标就是延时。只有低延时,主播和连麦嘉宾之间,才可以较好的互动、交流。根据ITU-TG.114标准,单向通话延时大于150ms就可受到通话连续性受到影响,最大可容忍时延为400ms。

  • SD-RTN™方案,基于UDP。SD-RTN™包含了编解码方案和服务端的传输方案。声网的私有专利编解码是面向互联网传输的编解码,能够保证高清晰度、低码率,并且会根据网络状况,自动调节码率。服务架构SD-RTN™是全球部署,全球部署有近100个数据中心。客户端均通过UDP连接SD-RTN™,通过就近接入策略,让使用者就近接入质量最好的数据节点;通过智能路由,经过传输延迟和质量优化的最优路径,自动避免网络拥塞,并规避骨干网络故障的影响。所以,SD-RTN™在跨国传输、海量并发、高可用方面有独特优势。

  • RTMP改进方案,基于TCP,由于TCP的传输机制导致天然的延时不可控。全球最大的CDN服务商,Akamai前几天就在GMIC会议上表示,要基于WebRTC技术来来升级现有CDN技术。显然Akamai意识到CDN方案在突破低延时方面的瓶颈。

  • WebRTC改进方案,基于UDP。WebRTC对Chrome浏览器有极好的支持,但在Native支持方面先天不足。WebRTC方案最大的不足是,只包含编解码方案,缺乏服务端解决方案。因此,选择此方案的同学注意了,一定要重点考察此方案在海量架构、高并发、弱网环境下的表现。

2. 音画同步

由于音频和视频不同采集、传输处理,会有很大程度上存在音画不同步的问题出现,这是一个比较严重的问题,观众端看到主播的动作,才听到声音;或者先听到声音,才看到动作,或者说话口型对不上,会感到很奇怪。

3. 卡顿率

卡顿是指两帧视频间隔超过一定时长,观众的直观感受就是画面卡顿。一般情况下,视频连麦中,比较常用的是把两帧之间的间隔大于400ms-600ms的看作一次卡顿 。如果卡顿次数过多,是非常影响正常连麦体验的。

4. 画质

直播中,主播都希望自己美美的,画面清晰是基本要求。

在给定的码率下,清晰度和分辨率有关系。如分辨率过低,则画面模糊,细节丢失;如分辨率过高,则失真明显。在分辨率够用的前提下,分辨率和清晰度成反比。在分辨率一定的情况下,码率与清晰度成正比关系,码率越高,图像越清晰;码率越低,图像越不清晰。

声网的私有专利编解码能够在低码率下保证高清晰度,并且会根据网络状况,自动调节分辨率和码率,使编码器运行在最佳分辨率下。开发者也可以通过接口,选择清晰度优先还是流畅度优先。

5. 延展性

直播是一个高度竞争的行业,玩法在不断的改变。从声网全球首个推出多人互动连麦,到现在连麦成为直播的标配,只用了不到1年的时间。更多的玩法和功能的出现,是市场在推动技术进步,同时也是技术进步在推动市场发展。声网现在在连麦的玩法上又拓展了一个新功能,跨直播间连麦。不同房间的主播可以进行连麦,穿透了之前一个房间就是一个频道的屏障。

要实现丰富的延展性,必须从底层架构设计上就有高度灵活性,类似声网的创新架构SD-RTN™。RTMP改进方案是基于存在了十多年的CDN方案进行改进,很难有大的突破。WebRTC在Native方面和服务端架构方面的短板,也造成了改进成本非常高。

基于以上几个指标,接下来讲如何测试连麦的效果。

如何测试连麦的效果

连麦的效果指的是:延时如何,卡顿频率如何,画质是否清晰。不能接受的是:卡屏、绿屏、花屏、断线。

设置视频属性

主播A设置:选择640x360,15fps,800kbps,其他设置选择默认

辅播B设置:选择320x240,15fps,300kbps,其他设置选择默认

设置丢包率和带宽

在用户的实际使用场景中,常常会有网络卡顿的情形,背后的原因可能是网络的丢包率高和带宽不足。通常,测试连麦需要用到网损仪来设定不同的丢包率模拟真实网络环境。但是,如果没有专业的网损环境,iOS自带网损模拟器也可以做简单的丢包和限带宽测试。设置方法见《WebRTC音视频方案自测教程》

测试流程

1台iPhone6作为主播,1台iPhone6作为辅播,主播的前置摄像头尽量接近以获取相同的摄像头输入。如果同时测试两种连麦方案,那么就是2台iPhone6作为主播,2台iPhone6作为辅播。

4台iPhone6的屏幕输出通过Blackmagic Multiview拼接为一路4k信号,送入4k显示器显示且录制。录制出来的成品,就像下面这个视频,这是声网和行业其它连麦方案的对比。通过观看录像,可以直观的观察到首帧出图时间、成像质量、卡顿、延时。

连麦对比视频

左侧是声网,右侧是行业其它方案。第一排是主播端,第二排是连麦端。通过秒表可以直观的看到延时。通过地球仪的转动,可以看到卡顿情况。整体观看,可以看出清晰度的差异。

测试结果:

这是一个报告模板,其中,卡顿指的是:视频两帧间隔>600ms,次数是按5分钟总时长来统计。按照上述步骤,你自己也可以出一份这样的报告。

【本文作者】

单辉 声网Agora.io 高级开发工程师

这么多直播连麦方案,到底哪种适合你?相关推荐

  1. 这么多连麦方案,到底哪种适合你?

    016年陌陌.映客等直播平台陆续上线连麦,如今连麦已经成为主流直播平台标配.声网于2016年全球率先推出的多人连麦.纯语音连麦等多种玩法,半年时间内,就与几乎所有全球主流直播平台达成深度合作,如陌陌. ...

  2. 直播连麦实现的三种方法

    目标 观众用手机看到rtmp协议的直播,可以看到传统主播直播.主播之间PK.主播与观众连麦等场景的视频. 这里主播直接上行rtmp协议是不可行的,实现不了连麦的功能,达不到连麦交流的要求. 方法一 1 ...

  3. 移动直播连麦实现思路:整体篇

    导语:本文专为介绍移动直播连麦实现架构和思路而写,介绍了移动直播连麦的整体情况.各种实现架构和优劣比较等,包括连麦介绍.角色定义.连麦特点要求,合成思路介绍.各种合成方式比较等几个小节. 移动直播连麦 ...

  4. anyRTC,一站式低延迟直播连麦解决方案

    全新的一站式"低延时直播连麦"解决方案,主打直播连麦和多画面特效,通过移动直播SDK打造跨平台一对多.多对多的超清酷炫直播场景.anyRTC音视频直播连麦解决方案方案包括,视频直播 ...

  5. 腾讯云直播一直播连麦实践

    直播连麦 连麦(也叫上麦)是比较热门的直播功能.所谓连麦,是指一个直播间中可以不仅只有一个主播,观众(或其它房间的主播)也可以参与进来与主播进行视频互动,从而增加视频直播的趣味性. 单向"到 ...

  6. srs 直播连麦环境搭建

    一.简介 二.修改conf/rtc.conf 三.两个客户端加入房间 四.合流 4.1分别拉流尝试 4.2合流推流 4.3拉取合流 一.简介 直播连麦是指在one2one或one2many进行音视频通 ...

  7. 【方案分享】2021AMII品牌女装抖音直播间运营方案.pptx

    省时查报告-专业.及时.全面的行研报告库 省时查方案-专业.及时.全面的营销策划方案库 [免费下载]2022年1月份热门报告盘点 [报告分享]2021-2022元宇宙报告.pdf 2022年私域运营机 ...

  8. 直播连麦、智能音箱、一键求救……实时互动技术应用全面爆发!

    作者 | 唐小引 & 孙浩峰 出品 | CSDN(ID:CSDNNews) 今时今日,当我们使用着微信的音视频通话功能,在吃鸡.狼人杀剧本杀里语音对话.直播答题组队,以及在各类在线教育的 Ap ...

  9. LiveVideoStack线上交流分享 (十六) —— 爱奇艺剧场直播云端混流方案

    如今网络直播如火如荼,剧场直播是其一个应用分支,主播在观看点播视频时的同时做出评述,观众端同步观看点播和主播评述的混合视频流.今晚 7:30 ,LiveVideoStack线上交流分享第十六期,我们邀 ...

最新文章

  1. 工厂模式理解了没有?
  2. mciSendString 的两个小坑
  3. 随机森林算法的随机性_理解随机森林算法的图形指南
  4. python基础-类
  5. 文件逆顺输出到新文件(三种方案)
  6. python整数转字节数组_【转】Python内置函数(7)——bytearray
  7. 深度学习(二十七)可视化理解卷积神经网络
  8. How to Prevent the next Heartbleed
  9. thinkpad分区win10_预装win10系统Thinkpad笔记本只有一个C盘怎么分区
  10. 2017 ACM-ICPC北京网络赛: C. Matrix(DP)
  11. 微信开发源代码详细分析-微信开发教程6
  12. linux安装mysql菜鸟教程_Linux安装mysql教程
  13. 百度网盘下载加速方法(免会员免破解官方正规)
  14. echarts横向柱形图显示不同类别所占整体百分比
  15. 美国低速自动驾驶在公共交通应用详解 | 自动驾驶系列
  16. CSS3 filter滤镜详解
  17. 图的有权最短路径及Dijkstra算法
  18. mysql数据库设计与应用答案智慧树_知到智慧树MySQL数据库设计与应用完整免费答案...
  19. 八戒帮扶V5v1.39 VUE任务系统微信公众平台任务系统完美运营
  20. 植物神经紊乱、焦虑症和抑郁症之间有哪些区别呢?

热门文章

  1. sentry sourcemap
  2. 对接企业微信,客户关系管理也可以很简单!
  3. 屏幕显示输入信号超出范围解决详细方法
  4. Go2Shell 安装到 Finder工具栏 提高编程效率
  5. 内外交困,直播商业化寡头博弈困境:向左或是向右走?
  6. Python调用腾讯API进行人脸身份证比对
  7. 渡课学习总结2018.7.18
  8. 努力赚钱,是为了不让自己的爱情受到别人金钱的考验--这就是现实。
  9. 资产管理公司拥抱区块链
  10. 计算机考研转专业难度大吗,大学里想转专业怎么做?985高校转专业条件及难度排行榜公布!...