积极探索云现场直播控制技术百度云理工学院插图

编者按 |现场直播金融创新行业体量急遽减少,但金融创新行业增长速度却在逐渐下滑,音频现场直播的互联网平台对于数十家供应商的软件系统提出了更多、更个人化的要求。是怎样的控制技术和服务项目在另一面支撑力着他们日常生活现场直播文本正式发布和播映呢?他们来介绍一下。

在2019年,现场直播金融创新行业体量已冲破600亿,随著终端频宽和终端互联网的相互护持,终端互联网的使用者和互联网流量进一步减少。预计到2020年现场直播金融创新行业体量将冲破700亿。但随著频宽体量的急速下降,现场直播金融创新行业增长速度在急遽下滑。

积极探索云现场直播控制技术百度云理工学院插图1

下滑的原因主要有下列几个。

在生产成本方面,使用者和互联网流量的减少引致数十家互联网平台的生产成本愈来愈高。因此现阶段国内对现场直播金融创新行业有了更为明晰的市场监管方式,市场监管愈来愈严苛,互联网现场直播早已从残暴增长期转变成身心健康市场监管期。现场直播金融创新行业的人口数增量早已见顶,使用者向颈部互联网平台分散,现场直播现场直播金融创新行业已进入上半场。

但随著新控制技术的急速产生和产业发展,人工智慧,5G控制技术,增强现实等持续技术创新,金融创新行业迎捷伊产业发展良机。

现阶段现场直播金融创新行业有一些极为众所周知的应用领域情景:格斗游戏(西势厝、北极熊电竞)、秀场(映客、辣椒)、新闻报道(CNTV)、基础教育(俞敏洪在线)、旅游(游四川)、金融创新(号留)、B2C(草莓街)、比赛(LOL巡回赛,亚洲杯)、SNS(陌陌)、智能家居(日光浴室、高架道路监视)。

积极探索云现场直播控制技术百度云理工学院插图2

针对不同的金融创新行业情景以及使用者群体,百度云现场直播提供了更为垂直于金融创新行业的端到端的软件系统,主要包括标准现场直播、终端现场直播SDK、慢现场直播和快现场直播四个情景,能够满足不同情景的不同控制技术需求,帮助现场直播使用者更快速、更安全的接入现场直播服务项目。

积极探索云现场直播控制技术百度云理工学院插图3

标准现场直播

首先他们来看看标准现场直播,在下图中他们从文本的专业程度、互动性强弱把现阶段现有的现场直播互联网平台划分成四个象限。现场直播互联网平台文本逐渐多样化,各种类型的现场直播互联网平台之间的界限逐渐模糊。现场直播文本整体向强互动、专业化方向迁徙,受过专业训练的素人主导的PUGC在文本生态中扮演着重要角色。

积极探索云现场直播控制技术百度云理工学院插图4

百度云现场直播互联网平台提供包含四大功能模块(推流模块、转码模块、录制模块、支撑力模块)的一站式现场直播软件系统。从主播推流上云,到云端转码、智能处理,再到现场直播下行分发,使用者观看现场直播。同时支持将现场直播文本录制为点播文件进行持久化存储,以便进行回看或存档。

积极探索云现场直播控制技术百度云理工学院插图5

现阶段,百度云现场直播互联网平台资源的覆盖十分全面,已覆盖50+国家和地区,拥有超过1300+(1100+国内&200+海外)加速节点,总储备频宽超过100T+,以此保证现场直播文本能够在全球范围内进行高质量推流和分发。

积极探索云现场直播控制技术百度云理工学院插图6

百度云现场直播互联网平台提供的能力包括标准现场直播推流、录制、时移、自动拼接、水印、回调、转推/拉、截图、鉴黄、混流、鉴权、丰富的openAPI以及QUIC加速能力,这些都是现场直播互联网平台常用的一些能力。

积极探索云现场直播控制技术百度云理工学院插图7

1.极速高清是百度云现场直播核心优势之一

极速高清主要是两个能力,或者说是两种用法,一种是在恒定码率的情况下,采用极速高清控制技术还原画面绚丽的细节。众所周知案例是去年央视的中秋晚会,采用了极速高清转码过后,人眼主观感受,要比普通转码高出20%以上。第二种用法,是在不改变人眼主观感受的前提下,尽量降低音频码率,以达到降低生产成本的目的。众所周知案例是去年亚洲杯期间,央视网采用极速高清控制技术,画面的流畅度和清晰度都有明显的提升,因此同等画质下码率降低了30%,这意味着节省掉30%的频宽生产成本。

积极探索云现场直播控制技术百度云理工学院插图8

2.另一个核心优势是PCDN控制技术

百度云新一代的P2P控制技术,能够有效的降低频宽生产成本,因此保证现场直播质量。百度云PCDN互联网平台,支撑力了英雄联盟巡回比赛现场直播,将频宽生产成本下降了50%以上,因此能够同时满足2S以内的超低延迟,将卡顿率控制在2%以内、首屏时间低至400毫秒等核心体验指标。

积极探索云现场直播控制技术百度云理工学院插图9

终端现场直播 SDK

终端现场直播 SDK(Mobile Live Video Broadcasting)是百度云现场直播服务项目(LVB) 在手机现场直播方向 的延伸。相比于主要面向云对接的现场直播(LVB) 服务项目,终端现场直播(MLVB)既提供了 基于 RTMP SDK 的快速集成方案,也提供了集现场直播(LVB)、点播(VOD)和云通信(IM) 等多云端服务项目于一体的一体化软件系统。

积极探索云现场直播控制技术百度云理工学院插图10

百度云现场直播的应用领域情景主要有自由开播、现场直播连麦、现场直播聊天和小程序现场直播四个情景。自由开播情景是借助终端现场直播 SDK,iOS、Android、PC、微信小程序、Web 或 H5 页面都可以接入现场直播能力,不再受限于环境和设备,主播随时拿起手机即可开播。终端现场直播 SDK 支持现场直播连麦,通过互动现场直播软件系统完成主播与观众之间音频连麦,实现双向的音频通话互动,打破现场直播单向交流的边界。终端现场直播 SDK 搭配百度云 IM 能力,让观众之间也能通过聊天互动,包括弹幕、评论、点赞等等,让现场直播互动更为多样精彩。终端现场直播 SDK 整合到小程序软件系统中,实现微信小程序端在线现场直播、多人通话、现场直播连麦等多种多样的复杂功能,满足绝大多数情景中的在线音音频需求。

积极探索云现场直播控制技术百度云理工学院插图11

终端现场直播SDK以源码集的形式,集文字互动、弹幕消息、飘星点赞、美颜增白、动效蒙皮等功能于一体,帮助使用者快速上线现场直播功能。实时美颜,在图像采集过程中,通过一系列复杂的DSP降噪、滤波、小波变换、光学处理等复杂数字图像处理控制技术,通过显存实时编码输出美化后的实时图像。

积极探索云现场直播控制技术百度云理工学院插图12

除了以上的基础功能之外,终端现场直播具备下列高级产品能力。

现场直播+连麦是在秀场现场直播和在线基础教育情景中经常使用的现场直播模式,它既能支持高并发和低生产成本的在线现场直播,又能通过连麦实现主播和观众之间的音频通话互动,具有极强的情景适用性。

积极探索云现场直播控制技术百度云理工学院插图13

主播PK 是在秀场现场直播情景中经常使用的一种吸引热度的方式,两个分处不同房间的主播可以相互分屏连麦(音频通话),主播与主播之间的延迟可以达到 500ms 以内,而观众在不需要切换流地址的情况下,可以在原来的 CDN 现场直播流中看到主播 PK 的效果。

积极探索云现场直播控制技术百度云理工学院插图14

录屏现场直播,手机录屏现场直播,即可以直接把主播的手机画面作为现场直播源,同时可以叠加摄像头预览,应用领域于格斗游戏现场直播、终端端APP演示等需要手机屏幕画面的情景。

积极探索云现场直播控制技术百度云理工学院插图15

AI 美颜,大眼、瘦脸、动效贴纸、绿幕等功能,是基于优图实验室的人脸识别控制技术和天天P图的美妆控制技术为基础开发的特权功能,百度云小现场直播团队通过跟优图和P图团队合作,将这些深度整合到 RTMP SDK 的图像处理流程中,以实现更好的音频。

积极探索云现场直播控制技术百度云理工学院插图16

绿幕抠像,主要是将绿色背景扣出,替换为其他丰富的素材的能力。

积极探索云现场直播控制技术百度云理工学院插图17

值得一提的是,终端现场直播SDK是开源的APP源码,让使用者在下载之后3步可以完成终端集成。

积极探索云现场直播控制技术百度云理工学院插图18

慢现场直播

慢现场直播是百度云针对大体量音音频上行的现场直播方案,专为音音频高并发推流情景而定制,广泛应用领域于智能家居监视、旅游景区现场直播、智慧门店分析等领域。

积极探索云现场直播控制技术百度云理工学院插图19

它有下列几个核心优势。

高并发推流:多年的音音频控制技术积淀,支持稳定清晰的大体量高并发音音频推流。

强大音音频能力:联合各音频产品能力,支持音音频录制与时移回看功能,客户可按需使用。

音频分析加成:配合智能AI控制技术的分析能力,实现智能标签、智能识别等音频文本分析。

极高性价比:专为大体量的音频上行情景定制,对比传统现场直播模式,更具备价格优势。

积极探索云现场直播控制技术百度云理工学院插图20

慢现场直播的产品架构分为两种模式,纯云端方案和边缘+云端方案。

百度云慢现场直播的云端方案配合云点播实现了摄像头音音频流的录制、存储功能;同时借助音频分析能力,通过API接口回调将百度云经过AI识别的音音频传回客户系统,有效助力客户业务。

积极探索云现场直播控制技术百度云理工学院插图21

边缘+云端方案运用客户侧的摄像头终端拍摄音频流通过优图盒子进行本地分析,百度云通过管理智能盒子边缘节点,对节点上报的事件信息进行管理和存储,并通过API接口或直接推送的形式,将事件通知推送到客户APP、微信公众号、小程序等等。

积极探索云现场直播控制技术百度云理工学院插图22

慢现场直播的应用领域情景有下列几类。

积极探索云现场直播控制技术百度云理工学院插图23

智能家居监视:借助百度云慢现场直播能力,多角度监视对每个角落进行实时现场直播。有效地应用领域于监督食品制作安全的日光浴室、实时交通路况监视、校园智能家居等情景。

一部手机游四川:在四川多个景点布置摄像头进行景点拍摄,利用百度云产品的高并发推流能力及音频分发能力,让使用者能够随时随地实时查看到四川的各处景点景色。

4S 门店:借助店内的摄像头,汽车4S门店通过优图盒子(边缘终端)对门店内的人流热区及客户识别,云端分析店内客流热区,让门店利用更为高效;让潜在客户进店时能够迅速识别,同步其他门店的数据,推送提醒店内销售人员。

快现场直播

快现场直播 是标准现场直播在超低延迟播映情景下的延伸,比传统现场直播协议延迟更低,为观众提供毫秒级的现场直播观看体验。能够满足一些对延迟性能要求更高的特定情景需求,例如在线基础教育、体育比赛现场直播、在线答题等。

积极探索云现场直播控制技术百度云理工学院插图24

快现场直播可以应用领域于这几种情景。

B2C现场直播:B2C现场直播中,商品拍卖、促销抢购等交易反馈对现场直播实时性要求很高,快现场直播超低延迟能力,能让主播和观众能够及时得到交易反馈,提升边看边买的体验。

在线课堂:师生通过现场直播完成在线的课堂教学,得力于快现场直播的超低延迟能力。快现场直播使师生双方的现场直播画面能够实时同步给对方,让在线课堂也能像面对面一样自然。

秀场现场直播:快现场直播适用于秀场现场直播情景,极大优化了在观众送礼、主播连麦等对画面实时性要求高的现场直播互动情景中的观众互动体验;

体育比赛:快现场直播为体育比赛提供超低延迟的现场直播能力护持,让比赛的比赛结果能够快速通过现场直播触达使用者,让观众享受实时介绍比赛动态的乐趣。

积极探索云现场直播控制技术百度云理工学院插图25

快现场直播具有超低延迟和抗性领先的核心优势

快现场直播与标准现场直播3-10秒延迟相比,快现场直播优化了推流及传输链路延迟,将延迟缩小至的1S以内。互联网质量波动时,播映延迟不会愈来愈大,互联网恢复后延迟可以及时恢复。WebRTC是音频通话标准,互联网控制和播映策略是流畅优先,弱网环境下依然可以保障能播映,不会一直卡住。

———下方更多精彩———-

活动推荐

积极探索云现场直播控制技术百度云理工学院插图26

积极探索云现场直播控制技术百度云理工学院插图27

关注云加社区,回复3加读者群

在看,让更多人看到

作者 nasiapp

在线客服
官方客服
我们将24小时内回复。
12:01
您好,有任何疑问请与我们联系!

选择聊天工具: