探球网-足球篮球比分|体育资讯最前线

实时音视频技术选型四大要素

  实时音视频技术的专业度和复杂度都很高,通过PaaS服务商来集成实时音视频,快速开发App,是时下开发者的优先选择。所选RTC是否好用易用、契合所需场景,将直接影响项目开发进度和后期运维成本。VMl中文科技资讯

  开发者需要了解实时音视频技术选型中要避开的坑点,以便提高开发集成效率。具体来说,以下四个方面要综合考虑。VMl中文科技资讯

  一、实时音视频与IM能力不宜分散VMl中文科技资讯

  几乎100%的实时音视频在线应用都有文字/语音消息、文件传输、图片显示等IM需求。VMl中文科技资讯

  目前市场上PaaS服务商这两方面能力强弱不一:有的大厂虽然两方面能力都提供,但不能确保两种能力同样高质量;有的专业 RTC 厂商,只能提供RTC能力,IM能力还得由第三方专业服务商提供。VMl中文科技资讯

  这样,便迫使开发者在集成过程中不得不分别选择服务商。当实时音视频与IM质量不稳定时,需要逐一协调各个服务商,逐一排查问题,无形中增加了后期的运营成本。其实,IM和音视频在很多场景下有耦合,建议开发者在选型一开始就要考虑具有RTC+IM双重高保障能力的通信云厂商,尽量"用一套 SDK,解决所有通信场景"。VMl中文科技资讯

实时音视频技术选型四大要素

VMl中文科技资讯

  对开发者来说两项功能同时开发,开发包相对比较小;如果前期只用到了IM,没有用到RTC,那么只需要学习IM方面的开发文档就可以了,一旦有了RTC需求,再去学习RTC文档,开发者只需接入相关接口,快速与IM能力做对接和匹配,即可完成两类功能在App生命周期里的全覆盖。VMl中文科技资讯

  除了开发上的易快速上手外,选择"IM+RTC+推送"整合的解决方案,开发者还可以享受一致的网络架构,提高传输的效率和质量,获得一致的服务保障。例如,融云近期升级了实时音视频能力,RTC的通信信令是复用IM信令通道,可以确保消息100%的连通率和到达率,使底层的通信优势发挥到最大。VMl中文科技资讯

  二、延时、卡顿、抖动的质量问题要解决好VMl中文科技资讯

  通过调研发现,用户最不能接受实时音视频的三个质量问题是延时、卡顿、抖动。VMl中文科技资讯

  低延时要靠两个方面解决,一个是传输协议,一个是优化整体传输环节。实时音视频的主流传输协议有RTMP和UDP两种,一种支持CDN技术,一种支持WebRTC技术,相对来说,CDN技术延时性在3-5秒,WebRTC可以在几百毫秒以内,现在很多厂商可以同时支持这两种技术,分别适用于不同的场景。VMl中文科技资讯

  整体传输环节中,采集/渲染、编解码/网络往返都会有一定的延时,有些是硬件的物理延迟,需要靠5G这样底层网络技术的提升,或者布更多的数据中心、边缘结点,便于就近接入;有些要针对实际场景,在具体形态上做一些权衡,比如在处理粒度上粗细的考虑,越细的粒度传输的数据包相对较大,延迟也会更高。VMl中文科技资讯

  当音视频出现卡顿时,有一个视频流畅优先的原则。我们通过降低一些码率和帧率,即使画面模糊一点,也要让用户视觉上是流畅不卡顿的。这样在选型时候,要考虑几个方面:一个是优化低码率下的视频清晰度;二是要有带宽估算能力,当预判到这个带宽没法承受高清晰视频传输时,自动转化成低码率并通过优化算法,使低码率视频清晰度能媲美高清视频。VMl中文科技资讯

实时音视频技术选型四大要素

VMl中文科技资讯

  另外,数据包通常会以错误的顺序到达,从而产生抖动相关问题,或者直接丢失,造成音视频空白。谷歌一份资料显示,视频聊天应用 Duo 99%的通话都有数据包丢失、过度抖动或网络延迟情况。20%的通话丢失了超过3%的音频,10%的通话丢包率超过8%,也就是说每次通话都有很多音频需要替换。VMl中文科技资讯

  处理上述问题,很多厂商会采用抗丢包及抗网络抖动能力的NACK(丢包重传)、FEC(前向纠错)、自适应带宽调整(动态调整码)、接收端 Jitter Buffer(媒体流平稳)等各种机制,有些是组合使用,有些是单独使用,开发者在选型前一定要做到深入了解。VMl中文科技资讯

  3、 拥有全球通信和场景化能力VMl中文科技资讯


上一篇:上一篇:国际航协在中国实现机票实时结算服务

下一篇:下一篇:实时淘宝商家信息采集