资讯专栏INFORMATION COLUMN

无连麦,不直播,都在说的直播利器连麦互动到底是啥?

马龙驹 / 3262人阅读

摘要:又拍云连麦互动直播方案架构图连麦互动直播方案有两点优势主播和连麦观众使用了实时音视频来进行连麦互动,实时性高,观众看到的合成画面里主播和观众的互动也是同步实时的,保证延时小,减少带宽压力。

在2016年的互联网关键词中,「直播」毫无疑问排在前列。从年中开始,直播便接替短视频成为新的大流量入口。参与直播的人,也从网红逐渐扩大到全民,内容也从最初的单一娱乐向更多元化的方向发展。

直播被普遍认为具有很强的互动性和即时性,人们能在送礼物、发评论的互动中感受到远超传统电视的存在感。但目前国内大多数直播平台,采用的是主播单向与用户互动的模式,非付费用户的存在感相对稀薄。

直播火了,连麦互动直播在火的路上

2016年下半年开始发生的变化是,连麦互动直播开始成为直播行业的标配。连麦互动直播让主播在唱“独角戏”之外,还可以看到主播之间连麦唱歌聊天,观众与主播之间连麦游戏互动。连麦直播意味着更即时的互动和更多待挖掘的场景。

连麦直播+社交:目前直播互动方式以最基础的文字互动或虚拟物品打赏为主,如果主播可以和自己的观众进行连麦互动,让观众也能够参与直播,能够带给观众更直接的参与感,有利于提升直播平台用户活跃度和粘性。

连麦直播+电商:直播+电商是目前较为成熟和稳定的一种商业模式,变现方式更为简单高效。目前的电商直播主要是主播在直播间销售商品,如果主播能现场连麦观众,甚至观众可以穿上衣服现场演示,能为用户塑造临场感,激发用户买买买的欲望。

连麦互动直播流程

                                        △ 连麦互动直播功能流程图

主播正常开始直播,普通观众看到主播的单人直播画面;

需要连麦的观众发起连麦请求,进入连麦申请列表;

主播从连麦申请列表中选择一名或多名观众进行连麦操作,主播与连麦观众进行实时音视频互动,同时互动直播系统生成“合成画面”;

普通观众看到直播画面为包含主播与连麦观众的“合成画面”;

连麦结束,恢复主播单人直播模式。

连麦互动直播方案

连麦互动直播的主要技术难点在于:

低延时互动:主播和互动观众之间就像电话沟通,为确保主播和互动观众之间能够实时互动,必须保证两者能在秒级以内听到对方的声音,看到对方的视频;

音画同步:互动直播中对音画同步的需求和单向直播中类似,只不过互动直播中的延迟要求更高,必须保证在音视频秒级传输情况下的秒级同步。

音视频实时合成:其他观众需要实时观看到对话结果,因此需要在客户端或者服务端将画面和声音实时合成,然后以低成本高品质的方式传输至观众端。

为了实现互动实时性高的连麦,首先需要有一套实现了类似微信、Skype及Facetime的多人音视频实时通话系统。这套实时通话系统可以选择自主研发或者基于开源软件如Google的WebRTC做二次开发。下面简单介绍多人实时通话系统的一些重点技术细节。

多人音视频实时通话系统为了降低通话时延,多使用UDP协议作为传输层协议,众所周知UDP协议没有丢包重传机制,为了提高弱网下的实时音视频的通话效果,需要使用相关方案来做QoS保障,主要包括:

a)使用基于网络状态的音视频码率自适应算法,根据当前网络的丢包、时延自适应降低或者升高音频和视频的码率和帧率,通过这个方法来降低网络的拥塞,提高通话质量;

b)使用智能Jitterbuf算法来平滑网络抖动,同时内部使用音频编码的丢包补偿(PLC)算法进一步提升通话质量;

c)使用基于多层参考的视频编解码器,降低视频丢包后的卡顿;

d)整个UDP传输层使用前向纠错FEC算法进行智能保护,最大限度上保证实时音视频通话的效果。

现在用户对于视频的清晰度要求越来越高,多人实时通话系统能够支持720p,720p下纯软件编解码对CPU开销过大,因此推荐使用高端机型并开启硬编解码模式。对于苹果手机硬件编解码基本上只与iOS的版本相关,而Android情况就会复杂得多,不仅与手机硬件相关,还和各个手机的ROM相关,为了解决这个问题需要去做适配。

搭建覆盖全球的服务器部署与网络拓扑,在全球范围内的机房节点搭建了多个多线接入网络拓扑,部署了高可用的服务器集群,并利用智能分配算法与路由策略,为跨省、跨运营商、跨国的多人实时通话提供优质的传输通道。

又拍云选择以主播为中心来进行连麦互动,采用实时通话系统来帮助主播和观众的实时互动连麦,通过实时通话通道,主播端收到观众端发送的音频和视频数据,主播端将自己的声音和观众的声音做混音,并将自己的画面与观众的画面做视频合成,最后将混合的声音和画面推流到CDN流媒体服务器,保障主播和观众间的互动质量。

                            △ 又拍云连麦互动直播方案架构图

连麦互动直播方案有两点优势:

主播和连麦观众使用了实时音视频来进行连麦互动,实时性高,观众看到的合成画面里主播和观众的互动也是同步实时的,保证延时小,减少带宽压力。

提供集成连麦功能的直播 SDK,并持续提供技术支持,方便项目对接,大大减少了开 发的时间和精力,缩短项目上线周期。

连麦互动让直播更富有互动性和趣味性,直播领域竞争激烈,直播平台只有不断推陈出新具备高用户粘性的差异化功能,才能站稳脚跟。

推荐阅读

又拍云推出微信小程序SDK,更轻更快更安全
又拍直播云SDK,自带美颜、滤镜、消噪、人声增益等功能|直播技术
又拍直播云功能处理篇:转码、录制、视频水印、视频截图|又拍直播云
又拍直播云功能基础篇:推流和拉流、多协议输出、多访问方式、回源端口自定义|又拍直播云

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/34698.html

相关文章

  • 到处在说直播连麦技术,它们真的能连吗?

    摘要:另外,直播中常用的流媒体协议包括,,等。在直播中,这种抖动的效果实际上跟丢包是一样的。综合来说,方式在一定程度上可以解决连麦的问题。 直播火了。连麦直播在火的路上。 那么,这些连麦技术方案,真的能连吗?本文将常见的,不常见的直播技术方案进行了比较,各位同学自己甄别。 首先,基础知识普及,技术上直播的流程是什么? 一、直播的流程 showImg(https://segmentfault....

    TZLLOG 评论0 收藏0
  • WebSocket+MSE——HTML5 直播技术解析

    摘要:是独立地创建在上的协议,协议中的那些概念都和没有关联,唯一关联的是使用协议的状态码进行协议切换时,使用的端口是,可以绕过大多数防火墙的限制。 作者 | 刘博(又拍云多媒体开发工程师) 当前为了满足比较火热的移动 Web 端直播需求,一系列的 HTML5 直播技术迅速的发展起来。 常见的可用于 HTML5 的直播技术有 HLS、WebSocket 与 WebRTC。今天我向大家介绍Web...

    SmallBoyO 评论0 收藏0
  • WebSocket+MSE——HTML5 直播技术解析

    摘要:是独立地创建在上的协议,协议中的那些概念都和没有关联,唯一关联的是使用协议的状态码进行协议切换时,使用的端口是,可以绕过大多数防火墙的限制。 作者 | 刘博(又拍云多媒体开发工程师) 当前为了满足比较火热的移动 Web 端直播需求,一系列的 HTML5 直播技术迅速的发展起来。 常见的可用于 HTML5 的直播技术有 HLS、WebSocket 与 WebRTC。今天我向大家介绍Web...

    刘明 评论0 收藏0
  • 这么多直播连麦方案,到底哪种适合你?

    摘要:改进主播和连麦嘉宾,基于进行视频会议,将视频会议在服务端合图后推到进行分发。从声网全球首个推出多人互动连麦,到现在连麦成为直播的标配,只用了不到年的时间。连麦对比视频左侧是声网,右侧是行业其它方案。 2016年陌陌、映客等直播平台陆续上线连麦,如今连麦已经成为主流直播平台标配。声网于2016年全球率先推出的多人连麦、纯语音连麦等多种玩法,半年时间内,就与几乎所有全球主流直播平台达成深度...

    王岩威 评论0 收藏0
  • 直播竞答必读:一定要提前知道的技术坑和新玩法

    摘要:七牛云直播竞答解决方案创业者要入局直播竞答,不仅要住海量高并发提供超低延时流畅播放体验,还要打造产品新玩法,形成差异化竞争。 2018 年的第一个周五,晚上 7 点刚过,2 场冲顶大会、3 场芝士超人、3 场百万作战和 4 场百万英雄在短短 3 小时内轮番登场。 又一个直播风口? 「冲顶大会」早已不是直播及其衍生产品的首次刷屏。事实上,自从直播成了互联网产品吸引流量的神兵利器,它掀起的...

    ShowerSun 评论0 收藏0

发表评论

0条评论

最新活动
阅读需要支付1元查看
<