深挖“窄带高清”的实现原理

过去几年,又拍云一直在点播、直播等视频应用方面潜心钻研,取得了不俗的成果。我们结合点播、直播、短视频等业务中的用户场景,推出了“省带宽、压成本”系列文章,从编码技术、网络架构等角度出发,结合又拍云的产品成果,向大家介绍节省流量,降低带宽成本的妙招。

《降低30%视频码率,深挖“窄带高清”的实现原理》是“省带宽、压成本”系列文章的第3篇。本文将深挖又拍云最新技术窄带高清,讲解窄带高清是怎样在不改变视频主观质量的情况下,通过改变码率来降低视频播放的带宽成本。

往期回顾:

第一篇:《节省50%以上的流量成本,从产品架构看PCDN的节流能力》

第二篇:《深入解析 H.265 编码模式,带你了解 Apple 全面推进 H.265 的原因》

第三篇:《爱奇艺第一季度又烧了11个亿元,什么时候是个头?》

第四篇:《降低30%视频码率,深挖“窄带高清”的实现原理》



尽量降低视频码率又不影响视频的主观观看质量,这是视频平台最关心的问题之一,因为降低码率意味着视频播放带宽的下降,节约成本。

2018年3月,又拍云自研的“窄带高清”功能,通过码率控制优化,让视频在主观质量不受影响的情况下,高效降低30%视频码率。窄带高清通过视频内容复杂度算法来确定视频应用场景,继而确定该场景下最优视频编码参数,辅助于码率控制算法,最终达到视频码率控制与带宽优化这个目的。

窄带高清可以有效提升视频播放平台终端用户视频打开速度,并且减少视频分发在带宽成本的上的消耗。

为什么窄带高清可以节省流量

一般来说,视频转码所需的成本比视频播放带宽少很多。因此通过视频转码来降低带宽成本成为可能,窄带高清就是建立在这个大前提下的一个功能。通过窄带高清功能可以节省30%的视频码率,大大降低直播、点播等业务场景下的带宽成本。

△ 左为源视频,右为窄带高清(详见视频演示)

窄带高清是如何实现

实现窄带高清有两个优化方向,1.在相同码率的情况下提升视频质量;2.在主观质量不受损失的情况下,尽可能降低视频码率。

根据实际业务需求,又拍云的“窄带高清”功能采用了第二种思路,即保持视频质量,降低码率。

场景划分

首先我们需要对视频进行内容复杂度分析,获取场景信息,取得视频空间域的复杂度和时间域的复杂度,然后获得视频序列最终的复杂度,最终确定视频编码场景。

为什么要进行场景划分呢?

下文我们以场景运动剧烈和平缓的视频为例,跟大家解释一下场景划分的原因。

△ 平缓视频、剧烈视频的码率分析(psnr)

从上图可以看出,在相同质量下,场景运动缓慢的视频比场景运动剧烈的视频,所需码率少很多,这就是场景划分的意义所在。

目前我们对手机拍摄视频、动画、商业动作大片、影视剧、在线教育、综艺节目等视频场景进行测试,获取常见场景下视频内容的编码复杂度。

另外在高码率的时候,码率增加对视频质量的提升比较少,因此只要找到合适码率,那么视频低码率下的质量和高码率下的质量是相差无几的,这是窄带高清的理论基石。

码率控制算法研究

码率控制算法是视频编码器中非常重要的部分,学术上,码率控制算法分为两种:CBR(Constant Bit Rate,恒定码率)和VBR(Variable Bit Rate,可变码率)。考虑到业务需求是在主观质量不变的情况下,降低视频文件大小,又拍云“窄带高清”功能采用VBR的方式,并做了如下设定提升整体画质的表现:

  • 视频运动缓慢的时候,使用更低的码率;运动剧烈的时候,使用更高的码率;
  • 视频图像内部,静止的部分分配更少的码率;运动的部分分配更多的码率。

通俗的说,把码率放在该用的地方,不浪费每一个比特,实现更低的码率,更清晰的画质,更小的文件尺寸。

视频编码器优化

如何对视频编码器进行优化,又拍云通过客观质量评价加主观质量评价想结合的办法来制定视频编码器优化标准。

视频质量评价作为视频领域热门的研究方向之一,分成主观质量评价和客观质量评价两类。

主观质量评价,即通过人工观察者直接观察视频,在主观打分,对视频质量的好坏进行分级,该方法必须严格的测试环境实施步骤复杂,而且对观察者要有一定的专业要求,因此实施起来需要巨大的代价,一般会用在科研机构小规模的算法验证。

而对海量视频数据和工业界来说,客观质量评价是更好的选择。PSNR(Peak Signal to Noise Ratio,峰值信噪比),是基于数学统计特性的评价方法,基于独立的像素差值,忽略序列内容对失真可见度的影响,因而会出现和主观感知的视频质量的一致性存在差异。但是算法简单,易于操作,且大规模应用。

针对PSNR的缺点,Zhou Wang等人实现了亮度、对比度和结构失真相互独立的质量评价方法SSIM,得到更接近人眼视觉特性的评价指标。但是依然是过于简单,屏蔽掉了HVS的其他生理特性。

视频编码器的参数数量很多,纷繁复杂,为了得到最佳的优化组合,我们用了客观质量评价算法PSNR(Peak Signal to Noise Ratio,峰值信噪比)和SSIM(Structural SIMilarity,结构相似度),主观质量评价算法VMAF(Video Multi-Method Assessment Fusion),再配合人工主观质量评价的方式,获取了常见场景下视频编码器的参数优化方案。

又拍云窄带高清,融合了以上几种客观和主观的评价方法,在编码器优化过程中,获取码率和视频质量的平衡。

目前,绝大多数视频还是使用H.264/AVC视频编码标准,更先进的H.265/HEVC和VP9的普及度还不够。因此又拍云“窄带高清”功能优先支持了H.264视频编码格式,未来将支持H.265格式。

学术界还有许多码率方面的研究成果,比如基于ROI(Region of Interest,感兴趣区域)和HVS(Human Visual System,人眼视觉系统)的码率控制,这些成果和技术,又拍云也将积极融入到相关产品和解决方案中。

推荐阅读:

爱奇艺第一季度又烧了11个亿元,什么时候是个头?

平均节省流量 30% ,这项视频云处理技术是如何实现的??

原文地址:https://www.cnblogs.com/upyun/p/9040963.html

时间: 2024-08-26 20:29:48

深挖“窄带高清”的实现原理的相关文章

阿里云黄海宇:窄带高清2.0——让直播更惊艳的魔术

摘要: 2018年4月11-12日,2018亚太CDN峰会在北京隆重召开,大会由亚太CDN领袖论坛.电视云论坛.短视频论坛.视频云论坛.新技术论坛.运营商论坛.国际云论坛等7大部分组成.在视频云论坛上,阿里云视频云高级算法专家黄海宇作了题为<窄带高清2.0--让直播更惊艳的魔术>的主题致辞. 2018年4月11-12日,2018亚太CDN峰会在北京隆重召开,大会由亚太CDN领袖论坛.电视云论坛.短视频论坛.视频云论坛.新技术论坛.运营商论坛.国际云论坛等7大部分组成.在视频云论坛上,阿里云视频

窄带高清赋能体育赛事,世界杯高清直播背后的技术变革

摘要: 当你观看视频如遇网络不好的情况,就会出现卡顿或系统提示切换成标清或流畅的画质,这个时候你会发现视频的清析度降低了.高清意味着高分辨以及需要更大的带宽来支撑,高清和宽带是一对矛盾体.这届优酷世界杯直播受到一致好评的关键,阿里云"窄带高清2.0"发挥了重大的作用. 写在前面 2018年俄罗斯世界杯比赛正在如火如荼进行中,互联网视频平台的入局,新媒体直播赛事的火爆,让本届世界杯也有了一个新标签:掌上世界杯.这意味着,用户可以更加随心所欲的"躺着看球". 半数球迷选

一场稳定、高清、流畅的大型活动直播是怎么炼成的?

双11猫晚是家喻户晓的综艺晚会,在今年的双11,阿里集团为2500万用户提供了一场在线直播视觉盛宴.网友评价这是一场既稳定流畅又高清的直播,当然在这背后离不开阿里云的技术支持. 本次天猫晚会中,视频云首次采用4k和50帧的技术,把整个画质提升到接近肉眼极限,同时为用户提供了如丝般顺滑的直播体验. 那么这么一场大型活动的直播究竟是如何炼成的呢?阿里云视频云技术专家裘良科带我们从稳定.画质.流畅.监控四个方面开始解读. 如何做到100%稳定?裘良科认为:"最安全的做法就是做好500%的准备,以不便应

《经济学原理:宏观经济学分册》学习手册 第7版_P248_2015.09_完整版PDF电子书下载 带索引书签目录高清版

<经济学原理:宏观经济学分册>学习手册  第7版_P248_2015.09_完整版PDF电子书下载 带索引书签目录高清版_13864820 下载地址 http://pan.baidu.com/s/1bJgNbK [作 者]付达院主编 [形态项] 248 [出版项] 北京:北京大学出版社 , 2015.09 [ISBN号]978-7-301-26243-6 [中图法分类号]F015 [原书定价]35.00 [主题词]宏观经济学-高等学校-自学参考资料 [参考文献格式] 付达院主编. <经济

《经济学原理:微观经济学分册》学习手册 第7版_P359_2015.09_完整版PDF电子书下载 带索引书签目录高清版

<经济学原理:微观经济学分册>学习手册  第7版_P359_2015.09_完整版PDF电子书下载 带索引书签目录高清版_13869902 下载地址    http://pan.baidu.com/s/1jHVHEM6 [作 者]付达院主编 [形态项] 359 [出版项] 北京:北京大学出版社 , 2015.09 [ISBN号]978-7-301-26244-3 [中图法分类号]F016 [原书定价]42.00 [主题词]微观经济学-高等学校-自学参考资料 [参考文献格式] 付达院主编. &l

高清:2口VGA分配器的使用和原理

1.VGA产品特性 1)适用于宽屏液晶显示器和大屏幕液晶电视机 2)RGB模拟通道:带宽250MHZ 3)支持分辨率:1920*1440 4)最大传输距离:30M 5)电源规格:DC9V 300mA 2.VGA分配器的原理 VGA分配器是将来自主机的信号源的视频信号分配成两个或多个模拟信号,并在保持原有信号质量的情况下将其分配两个或多个高分辨率数据显示设备,还同时提供信号的峰值和电平调整和均衡等放大和增强功能. 3.VGA连接示意图 高清:2口VGA分配器的使用和原理

分享《深入浅出强化学习:原理入门》高清PDF+源代码

下载:https://pan.baidu.com/s/1RQvGYYbIkc3ob3jB6AAu0Q 更多分享资料:https://www.cnblogs.com/javapythonstudy/ <深入浅出强化学习:原理入门>高清PDF+源代码高清PDF,284页,带书签目录,彩色配图,文字可以复制.配套源代码.<深入浅出强化学习:原理入门>,作者: 郭宪 / 方勇纯 ,用通俗易懂的语言深入浅出地介绍了强化学习的基本原理,覆盖了传统的强化学习基本方法和当前炙手可热的深度强化学习方

《深入浅出强化学习:原理入门_郭宪方勇纯》高清PDF+源代码

资源链接:https://pan.baidu.com/s/1y6Fl0zUymMySZZhmBToy2Q<深入浅出强化学习:原理入门>高清PDF+源代码高清PDF,284页,带书签目录,彩色配图,文字可以复制.配套源代码.<深入浅出强化学习:原理入门>,作者: 郭宪 / 方勇纯 ,用通俗易懂的语言深入浅出地介绍了强化学习的基本原理,覆盖了传统的强化学习基本方法和当前炙手可热的深度强化学习方法.高清PDF如图: 原文地址:http://blog.51cto.com/14063572/

《STM32F7原理与应用HAL库版上下册》张洋高清PDF学习

资源链接:https://pan.baidu.com/s/13xNGYTbW8wtE4pZQHi95qA本套书籍以ST公司的STM32F767为目标芯片,详细介绍了STM32F7的特点.片内外资源的使用,并辅以65个例程,由浅入深地介绍了STM32F7的使用.所有例程都经过精心编写,从原理开始介绍,到代码编写.下载验证,一步步教读者如何实现.所有源码都配有详细注释,且经过严格测试.HAL库版不同于固件库,是ST公司最新力推的开发包,程序层次清晰,易于二次开发.上下册PDF全集高清版,仅供参考使用