低于人类反应时间50ms,清流鼎点发布超低延时直播技术

发表于 讨论求助 2021-05-10 11:01:12

HMS Core3月5日,清流鼎点公布的新一代iLive方案技术特色是超低延时视频互动以及弱网下的多径传输。这项技术让直播延时控制在50ms左右,超过人类视觉神经能觉察反应的100ms。

当大半个创投圈追寻区块链、比特币风口的时候,这家位于清华科技园的企业一直在技术方面不断突破。“从2012年为国家级直播平台提供技术解决方案,将直播延时从400毫秒(ms)延迟到今年的50ms,这是我们近些年的努力成果。”清流鼎点(PowerInfo)创始人兼CTO李毅博士说道。

3月5日,清流鼎点举办了一场特殊的发布会,这场两地以直播技术连接,同时举办的发布会上公布了其新一代iLive方案。清流鼎点公布的新一代iLive方案技术特色是超低延时视频互动以及弱网下的多径传输。

超低延时和弱网下的多径传播在实际产业应用中有何作用?李毅向介绍了其案例客户应用。2015年清流鼎点服务的客户是大火的映客直播,清流鼎点为其提供3人连麦直播解决方案。当时基于不同操作系统,在视频推流、传输、解码等每个环节都要产生10ms延时,最后直播紧耦合出来的是400多ms延时;后来直播中出现游戏互动,对直播延时要求进一步提高,清流鼎点将技术提升到200ms以内;2017年直播平台出现更多的斗歌、斗舞环节,专业的歌手听得出十分之一拍的延迟,这对直播技术提出了更高要求,必须控制在50-100ms延迟,如今清流鼎点1ms、1ms的优化,将直播延时平均水平控制在50ms以内。

李毅谈到,正常人类的神经传输速度是100米每秒,许多心理学者对人的生理反应时间的实验都测得是100多毫秒,所以清流鼎点认为视频传输如果突破100ms的门槛,就具备替代人类视觉的可能,可以真正应用在多个行业,不单局限于目前简单娱乐应用了,未来可以促进在在线教育、远程控制技术、远程手术、远程反恐机器人等领域产生实际产业应用。

清流鼎点今天发布的另一技术解决方案是在弱网下的多径传输。现场测试环节中,微信视频在一些信号不好的地方已经出现视频卡顿情况,换用清流鼎点ilive产品方案后,相同地点和相同网络情况下,并未出现视频传输卡顿情况。

李毅向讲述背后原理时提到,视频直播一般会有三个指标相互制约——能否将延时尽可能降低;能否将视频质量尽可能提高;能否将卡顿尽可能减少,三者都实现在行业内一直是个难题。清流鼎点的提出的创新解决方案,第一是将编码、传输、解码技术紧密结合,从整体角度构造紧耦合系统。第二是在编码、封装、网络丢包模型、延迟预测、带宽调节、缓冲控制、解码纠错等每一个技术细节,以1ms为单位持续优化。第三是基于对海量数据的分析设计质量、流畅、延迟之间的平衡关系,同时还可针对不同场景给出不同的平衡模式。

提及今天发布的新技术应用方向,李毅告诉,第一是将这项方案应用到生活娱乐、教育、医疗、军事科技等领域中。第二是将这些技术为新兴的AR技术集合,进一步丰富视频互动的应用场景;第三,将深度学习应用到视频传输优化中,持续提高用户体验。

据悉清流鼎点(PowerInfo)团队创始人全部来自清华大学计算机系,在视频编码及传输领域有将近20年的持续积累,为包括央视网、映客、Starmaker、dokidoki、一起秀、肆客在内的十数家客户提供着视频服务。

目前清流鼎点是盈利状态,未来将继续投入到技术研发和产品化方面,“我们的产品只需要3行代码即可集成到客户产品中,未来继续将延时提升到30ms、20ms、甚至10ms。”最后李毅向说道。


发表
26906人 签到看排名