入门丨视频编码简述

当大家看电影追剧时,是看的高清还是标清?

图鸭君觉得只要网速够得上的小伙伴应该没有人愿意再看标清了吧!毕竟高清视频的高分辨率和清晰画质观影体验更好。


伴随着用户对高清视频需求量的增加,视频多媒体的视频数据量也越来越大。如果不经过压缩,这些视频将很难应用于实际的存储和传输。视频压缩解码技术可以有效地去除视频数据中的冗余信息,实现视频数据在互联网中的快速传输和离线存储。因此,视频压缩解码技术是视频应用中的一项关键性技术。

视频编码的背景

在过去的几十年中,一系列视频编码标准被推出并广泛应用。现有的视频压缩标准就有很多种,包括国际标准化组织(International Organization for Standardization, ISO)/国际电工技术委员会(International ElectrotechnicalCommission, IEC)制定的MPEG-1、MPEG-2、MPEG-4标准;国际电信联盟电信标准化部门(InternationalTelecommunication Union-Telecom, ITU-T)制定的H.261、H.263等。

2003年3月,ITU-T和ISO/IEC正式公布了H.264/MPEG-4 AVC视频压缩标准。H.264作为目前应用最为广泛的视频编码标准,在提高编码效率和灵活性方面取得了巨大成功,使得数字视频有效地应用在各种各样的网络类型和工程领域。为了在关键技术上不受国外牵制、节约专利费用支出,中国制定了AVS系列标准,可以提供与H.264/AVC相当的编码效率。

近年来随着用户要求的不断提升,高清(1920x1080)和超高清(3840x2160)视频的应用越来越广泛。相比于标清视频,高清视频分辨率更大更清晰,但是相应的数据量也随之增加。在存储空间和网络带宽有限的情况下,现有的视频压缩技术已经不能满足现实的应用需求。为了解决高清及超高清视频急剧增长的数据率给网络传输和数据存储带来的冲击,ITU-T和ISO/IEC联合制定了具有更高压缩效率的新一代视频压缩标准HEVC(High Efficiency Video Coding)。


简说HEVC

HEVC基于传统的混合视频编码框架,采用了更多的技术创新,包括灵活的块划分、更精细的帧内预测、新加入的Merge模式、Tile划分、自适应样点补偿等。灵活的块划分对编码性能提升最大,块划分包括编码单元(CU)、预测单元(PU)和变换单元(TU)。这些技术使得HEVC编码性能比H.264/AVC提高了一倍。但是,这些技术也使得HEVC编码器的复杂度大大增加,不利于HEVC编码器的实时应用和推广。


HEVC高性能的获得是以巨大的计算复杂度为代价的:HEVC是通过递归对每个编码单元进行率失真优化过程(RDO)来选择最优的模式划分,这种方法的复杂度很高。因此,降低HEVC编码复杂度的研究工作具有重要的实际应用价值和广泛的应用前景。

视频解码的意义

视频转码技术是一种解决视频发送端与接收端兼容性问题的技术,它能实现不同的视频标准、视频分辨率、视频帧率和视频码率等之间的相互转换。釆用视频转码技术只需要改变发送端的系统结构或者在网关处增加相应的转码器即可,无需对接收端做任何修改。

视频转码技术不仅能调整视频流的分辨率、帧率、码率等各种属性去适应不同的终端用户和网络带宽,还可以对视频流的压缩格式、语法结构等进行转换,因此视频转码技术应用广泛。

总体来说,该技术研究实用价值非常高,它将用来满足更多领域的数字视频转换需求,不仅覆盖包括媒体网管多会议单元、视频监控、视频广播转码和医疗设备等商用产品中,还可以用于包括高清视频会议终端数字媒体适配器、高清网络摄像机、视频电话和高级数字机顶盒等产品。


HEVC关键技术研究

近年来,伴随着HEVC编码标准在开发过程中一步步的完善,国内外相关组织和科研机构在HEVC编码算法方面也给出了很多有效的建议,陆续有科研论文发表于视频图像领域顶级期刊和会议,包括IEEE Trans. CSVT、IEEE Trans. Multimedia、ICIP、ICME、PCS、VCIP等。

HEVC帧间编码优化

灵活的数据划分方式,是HEVC标准非常显著的特点之一。借助于遍历搜索确定CU,PU和TU划分方式等编码参数,HEVC的率失真性能显著优于之前的编码标准,但这也引入了大量的计算复杂度。帧间CU快速选择算法是根据相邻CU深度信息或编码中间参数等对CU大小和帧间PU模式进行提前判断,从而降低编码复杂度的过程。根据利用的信息不同,帧间CU的快速选择方法可以分为基于相邻CU深度信息、基于编码中间参数、基于率失真代价的快速选择方法。

HEVC帧内编码优化

帧内CU的快速选择算法是对CU的纹理复杂程度进行评估或根据相关CU深度信息等,实现CU尺度和帧内预测模式的快速选择,从而降低编码复杂度的过程。根据使用信息的不同,帧内CU的快速选择方法可以分为基于纹理复杂度、基于相邻CU信息、基于子CU信息和基于率失真代价的快速选择方法。

HEVC码率控制研究

在实际应用场合,传输带宽通常都是有限的,如何在有限的带宽下尽可能保证视频的质量,即码率控制,是视频编码技术需要解决的一个重要问题。对于以高清、超清视频作为主要编码对象的HEVC标准来说,如何在有限的带宽资源下合理分配码率,使视频质量达到最佳,也就成为了编码时需要考虑的重要问题。

目前码率控制模型可以分为三大类:Q域,ρ_域和λ_域。此外,还有很多相关码率控制方面的算法,包括针对帧层比特分配问题提出的改进算法、通过调整拉格朗日因子来改进码率控制的算法、根据初始量化参数选取问题提出新的初始量化参数预测算法、针对场景切换问题提出新的算法、考虑图像复杂度以建立更准确的码率控制等等。还有一些针对特定应用所提出的码率控制算法,例如无线应用、高清应用等。对新一代的H.265/HEVC,如何有效的从各个方面来改进码率控制也逐渐成为研究热点。

总结与展望

随着互联网和移动网络的快速发展,市场对更高分辨率视频的需求越来越大,高质量视频服务在网络数据中占据比例越来越高,虽然网络带宽在不断增加,依然无法满足用户对于视频质量的需求,使得更高压缩效率的编码技术成为工业级和学界研究的热点。

在这种背景下,HEVC应运而生,虽然HEVC保持了高压缩比,但是其复杂运算也限制了其推广和应用。所以在保持转码视频质量的前提下,大幅度优化转码过程的复杂度是一个值得大家共同研究的课题。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,658评论 6 496
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,482评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,213评论 0 350
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,395评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,487评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,523评论 1 293
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,525评论 3 414
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,300评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,753评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,048评论 2 330
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,223评论 1 343
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,905评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,541评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,168评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,417评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,094评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,088评论 2 352

推荐阅读更多精彩内容

  • 在保证视频图像质量的前提下,HEVC通过增加一定的计算复杂度,可以实现码流在H.264/AVC的基础上降低50%。...
    加刘景长阅读 7,842评论 0 6
  • 视频编码与封装方式详解 1.编码方式和封装格式 2.视频编码标准两大系统 MPEG-1 MPEG-2 MPEG-3...
    latthias阅读 6,358评论 0 22
  • 视频编码格式全面解析 我们在详解各种主流的视频格式之前,先抛开各种视频格式的定义,来讨论这样一件事情:你觉得目前的...
    latthias阅读 21,098评论 2 30
  • “随着技术的不断进步,视频技术的制作加工门槛逐渐降低,信息资源的不断增长,同时由于视频信息内容更加丰富完整的先天优...
    陈墨啊阅读 2,917评论 2 53
  • 酒之趣,皆因饮者之趣。 天若不爱酒,酒星不在天。地若不爱酒,地应无酒泉。天地既爱酒,爱酒不愧天。已闻清比圣,复道浊...
    99小鱼9999阅读 630评论 0 3