视频编码的基本原理

视频图像数据有极强的相关性,也就是说有大量的冗余信息。其中冗余信息可分为空域冗余信息和时域冗余信息。压缩技术就是将数据中的冗余信息去掉(去除数据之间的相关性),压缩技术包含帧内图像数据压缩技术、帧间图像数据压缩技术和熵编码压缩技术。

一、去时域冗余信息 
    使用帧间编码技术可去除时域冗余信息,它包括以下三部分: 
1、 运动补偿 
    运动补偿是通过先前的局部图像来预测、补偿当前的局部图像,它是减少帧序列冗余信息的有效方法。 
2、 运动表示 
    不同区域的图像需要使用不同的运动矢量来描述运动信息。运动矢量通过熵编码进行压缩。 
3、 运动估计 
    运动估计是从视频序列中抽取运动信息的一整套技术。 
注:通用的压缩标准都使用基于块的运动估计和运动补偿

二、去空域冗余信息 
    主要使用帧间编码技术和熵编码技术: 
1、变换编码 
    帧内图像和预测差分信号都有很高的空域冗余信息。变换编码将空域信号变换到另一正交矢量空间,使其相关性下降,数据冗余度减小。 
2、量化编码 
    经过变换编码后,产生一批变换系数,对这些系数进行量化,使编码器的输出达到一定的位率。这一过程导致精度的降低。 
3、 熵编码 
    熵编码是无损编码。它对变换、量化后得到的系数和运动信息,进行进一步的压缩。

三、视频编码的基本框架 
H.261 
    H.261标准是为ISDN设计,主要针对实时编码和解码设计,压缩和解压缩的信号延时不超过150ms,码率px64kbps(p=1~30)。 
    H.261标准主要采用运动补偿的帧间预测、DCT变换、自适应量化、熵编码等压缩技术。 只有I帧和P帧,没有B帧,运动估计精度只精确到像素级。支持两种图像扫描格式:QCIF和CIF。

H.263 
    H.263标准是甚低码率的图像编码国际标准,它一方面以H.261为基础,以混合编码为核心,其基本原理框图和H.261十分相似,原始数据和码流组织也相似;另一方面,H.263也吸收了MPEG等其它一些国际标准中有效、合理的部分, 如:半像素精度的运动估计、PB帧预测等,使它性能优于H.261。 
H.263使用的位率可小于64Kb/s,且传输比特率可不固定(变码率)。H.263支持多种分辨率: SQCIF(128x96)、 QCIF、CIF、4CIF、16CIF。

与H.261和H.263相关的国际标准 
与H.261有关的国际标准 
H.320:窄带可视电话系统和终端设备; 
H.221:视听电信业务中64~1 920Kb/s信道的帧结构; 
H.230:视听系统的帧同步控制和指示信号; 
H.242:使用直到2Mb/s数字信道的视听终端的系统。 
与H.263有关的国际标准 
H.324:甚低码率多媒体通信终端设备; 
H.223:甚低码率多媒体通信复合协议; 
H.245:多媒体通信控制协议; 
G.723.1.1:传输速率为5.3Kb/s和6.3Kb/s的语音编码器。

JPEG 
    国际标准化组织于1986年成立了JPEG(Joint Photographic Expert Group)联合图片专家小组,主要致力于制定连续色调、多级灰度、静态图像的数字图像压缩编码标准。常用的基于离散余弦变换(DCT)的编码方法,是JPEG算法的核心内容。

MPEG-1/2 
    MPEG-1标准用于数字存储体上活动图像及其伴音的编码,其数码率为1.5Mb/s。 MPEG-1的视频原理框图和H.261的相似。 
    MPEG-1视频压缩技术的特点:1. 随机存取;2. 快速正向/逆向搜索;3 .逆向重播;4. 视听同步;5. 容错性;6. 编/解码延迟。MPEG-1视频压缩策略:为了提高压缩比,帧内/帧间图像数据压缩技术必须同时使用。帧内压缩算法与JPEG压缩算法大致相同,采用基于DCT的变换编码技术,用以减少空域冗余信息。帧间压缩算法,采用预测法和插补法。预测误差可在通过DCT变换编码处理,进一步压缩。帧间编码技术可减少时间轴方向的冗余信息。 
    MPEG-2被称为“21世纪的电视标准”,它在MPEG-1的基础上作了许多重要的扩展和改进,但基本算法和MPEG-1相同。

MPEG-4 
    MPEG-4标准并非是MPEG-2的替代品,它着眼于不同的应用领域。MPEG-4的制定初衷主要针对视频会议、可视电话超低比特率压缩(小于64Kb/s)的需求。在制定过程中,MPEG组织深深感受到人们对媒体信息,特别是对视频信息的需求由播放型转向基于内容的访问、检索和操作。 
    MPEG-4与前面提到的JPEG、MPEG-1/2有很大的不同,它为多媒体数据压缩编码提供了更为广阔的平台,它定义的是一种格式、一种框架,而不是具体算法,它希望建立一种更自由的通信与开发环境。于是MPEG-4新的目标就是定义为:支持多种多媒体的应用,特别是多媒体信息基于内容的检索和访问,可根据不同的应用需求,现场配置解码器。编码系统也是开放的,可随时加入新的有效的算法模块。应用范围包括实时视听通信、多媒体通信、远地监测/监视、VOD、家庭购物/娱乐等。 
JVT:新一代的视频压缩标准 
JVT是由ISO/IEC MPEG和ITU-T VCEG成立的联合视频工作组(Joint Video Team),致力于新一代数字视频压缩标准的制定。 
JVT标准在ISO/IEC中的正式名称为:MPEG-4 AVC(part10)标准;在ITU-T中的名称:H.264(早期被称为H.26L)

H264/AVC 
    H264集中了以往标准的优点,并吸收了以往标准制定中积累的经验, 采用简洁设计,使它比MPEG4更容易推广。H.264创造性了多参考帧、多块类型、整数变换、帧内预测等新的压缩技术,使用了更精细的分象素运动矢量(1/4、1/8)和新一代的环路滤波器,使得压缩性能大大提高,系统更加完善。 
H.264主要有以下几大优点: 
1、高效压缩:与H.263+和MPEG4 SP相比,减小50%比特率 
2、 延时约束方面有很好的柔韧性 
3、 容错能力 
4、编/解码的复杂性可伸缩性 
5、解码全部细节:没有不匹配 
6、高质量应用 
7、 网络友善

监控中的视频编码技术 
    目前监控中主要采用MJPEG、MPEG1/2、MPEG4(SP/ASP)、H.264/AVC等几种视频编码技术。对于最终用户来言他最为关心的主要有:清晰度、存储量(带宽)、稳定性还有价格。采用不同的压缩技术,将很大程度影响以上几大要素。

MJPEG 
    MJPEG(Motion JPEG)压缩技术,主要是基于静态视频压缩发展起来的技术,它的主要特点是基本不考虑视频流中不同帧之间的变化,只单独对某一帧进行压缩。 
    MJPEG压缩技术可以获取清晰度很高的视频图像,可以动态调整帧率、分辨率。但由于没有考虑到帧间变化,造成大量冗余信息被重复存储,因此单帧视频的占用空间较大,目前流行的MJPEG技术最好的也只能做到3K字节/帧,通常要8~20K!

MPEG-1/2 
    MPEG-1标准主要针对SIF标准分辨率(NTSC制为352X240;PAL制为352X288)的图像进行压缩. 压缩位率主要目标为1.5Mb/s.较MJPEG技术,MPEG1在实时压缩、每帧数据量、处理速度上有显著的提高。但MPEG1也有较多不利地方:存储容量还是过大、清晰度不够高和网络传输困难。 
    MPEG-2 在MPEG-1基础上进行了扩充和提升,和MPEG-1向下兼容,主要针对存储媒体、数字电视、高清晰等应用领域,分辨率为:低(352x288),中(720x480),次高(1440x1080),高(1920x1080)。MPEG-2视频相对MPEG-1提升了分辨率,满足了用户高清晰的要求,但由于压缩性能没有多少提高,使得存储容量还是太大,也不适和网络传输。

MPEG-4 
    MPEG-4视频压缩算法相对于MPEG-1/2在低比特率压缩上有着显著提高,在CIF(352*288)或者更高清晰度(768*576)情况下的视频压缩,无论从清晰度还是从存储量上都比MPEG1具有更大的优势,也更适合网络传输。另外MPEG-4可以方便地动态调整帧率、比特率,以降低存储量。 
    MPEG-4由于系统设计过于复杂,使得MPEG-4难以完全实现并且兼容,很难在视频会议、可视电话等领域实现,这一点有点偏离原来地初衷。另外对于中国企业来说还要面临高昂的专利费问题,目前规定: 
1、每台解码设备需要交给MPEG-LA 0.25美元 
2、编码/解码设备还需要按时间交费(4美分/天=1.2美元/月 =14.4美元/年)

H.264/AVC 
    H.264集中了以往标准的优点,在许多领域都得到突破性进展,使得它获得比以往标准好得多整体性能: 
1、和H.263+和MPEG-4 SP相比最多可节省50%的码率,使存储容量大大降低; 
2、 H.264在不同分辨率、不同码率下都能提供较高的视频质量; 
3、 采用“网络友善”的结构和语法,使其更有利于网络传输。 
    H.264采用简洁设计,使它比MPEG4更容易推广,更容易在视频会议、视频电话中实现,更容易实现互连互通,可以简便地和G.729等低比特率语音压缩组成一个完整的系统。 
    MPEG LA吸收MPEG-4的高昂专利费而使它难以推广的教训,MPEG LA制定了以下低廉的H.264收费标准:H.264广播时基本不收费;产品中嵌入H.264编/解码器时,年产量10万台以下不收取费,超过10万台每台收取0.2美元,超过500万台每台收取0.1美元。低廉的专利费使得中国H.264监控产品更容易走向世界。

四、监控中视频编码分辨率的选择 
    目前监控行业中主要使用以下分辨率:SQCIF、QCIF、CIF、4CIF。 
    SQCIF和QCIF的优点是存储量低,可以在窄带中使用,使用这种分辨率的产品价格低廉;缺点是图像质量往往很差、不被用户所接受。 
    CIF是目前监控行业的主流分辨率,它的优点是存储量较低,能在普通宽带网络中传输,价格也相对低廉,它的图像质量较好,被大部分用户所接受。缺点是图像质量不能满足高清晰的要求。 
    4CIF是标清分辨率,它的优点是图像清晰。缺点是存储量高,网络传输带宽要求很高,价格也较高。

分辨率新的选择-528x384 
    2CIF(704x288)已被部分产品采用,用来解决CIF清晰度不够高和4CIF存储量高、价格高昂的缺点。但由于704x288只是水平分辨率的提升,图像质量提高不是特别明显。 
    经过测试,我们发现另外一种2CIF分辨率528x384,比704x288能更好解决CIF、4CIF的问题。特别是在512Kbps-1Mbps码率之间,能获得稳定的高质量图像,满足用户较高图像质量的要求。目前这一分辨率已被许多网络多媒体广播所采用,被广大用户所接受。比如杭州网通网上影院是采用512x384分辨率,在768k下能稳定地获得近似DVD的图像质量。

监控中实现视频编码的最佳方式 
    目前视频编码正处于一个技术日新月异的时期,视频编码的压缩性能在不断得到提升。 
    在监控中主要使用ASCI和DSP两种方案。由于ASIC芯片的设计、生产周期过长,使它已跟不上视频编码的发展速度。而DSP芯片,由于它的通用设计,使它能实现各种视频编码算法,并且可以及时更新视频编码器,紧跟视频编码的发展速度。另外使用DSP芯片可以比ASIC更灵活的配置编码器,使编码器达到最佳性能。

海康威视产品目前达到的技术水准 
    海康威视产品采用最先进的H.264视频压缩算法和高性能的DSP处理器。 
强大的H.264视频压缩引擎使产品获得极高的压缩比、高质量的图像质量和良好的网络传输性能。高性能的DSP处理器能灵活的配置视频编/解码器:动态设置分辨率、帧率、码率、图像质量等;可以双码流输出,达到本地存储和网络传输分别处理的功能。 
    使用TM130X DSP的产品,单个芯片能实时压缩一路以下分辨率的视频:SQCIF、QCIF、CIF、2CIF(PAL:704x288或528x384)。 
    使用DM642 DSP的产品,单个芯片能实时压缩4路以下分辨率的视频:SQCIF、QCIF、CIF、2CIF(PAL:704x288或528x384)。单个芯片能实时压缩2路4CIF视频。

1、基本概念:嵌入式、实时与多任务 
a、嵌入式:软件(包括操作系统和功能软件)集成于硬件系统之中,简单的说就是软件与硬件一体的系统。 
b、实时:在规定的时限内响应事件。超时的响应是失败的响应。 
c、多任务:同时响应多个请求 
d、实时系统与分时系统: 
    实时与非实时相对 
    分时与非分时(独占)相对

2、嵌入式硬盘录像机的特点 
a、嵌入式、实时、多任务设备 
b、软硬件专业性强,无多余功能 
c、结构简单紧凑,体积小

五、嵌入式硬盘录像机技术难点? 
1、硬盘管理 
硬盘记录数据的有效性、可快速检索、错误恢复能力、硬盘的使用寿命(无论是嵌入式还是PC式DVR,目前硬盘管理问题没有得到有效解决) 
2、网络传输 
硬盘录像机:网络管理 
视频:网络传输 
3、视频编解码 
视频编解码及其辅助功能的实现

六、嵌入式硬盘录像机现状? 
1、国内品牌为主 
  a 、不同的技术要求和标准 
  b、客户定制化服务的要求越来越高 
  c、及时的技术支持和售后服务 
2、厂商越来越多,竞争非常激烈 
3、产品正逐步走向成熟

七、嵌入式硬盘录像机发展趋势? 
1、更广的应用领域 
2、更高的帧率、分辨率 
3、更低的码率 
4、更丰富的功能 
5、更强的主机性能,支持更多通道 
6、更高的可*性 
7、更强的网络性能 
8、与基于PC机的DVR长期共存

七、 市场背景 
    伴随着计算机及网络技术的飞速发展,尤其视频编解码技术的日益成熟、计算机处理能力的快速提高、以及宽带的逐渐普及,基于Internet的视频网络实时应用在许多行业和政府部门被大范围采用,尤其是银行、广电、石油、电力等行业,出现了许多成功案例。 
    提到基于Internet的视频网络实时应用,我们可能更多地会想到可视电话及视频会议系统、电视网络实况转播、远程教育等。这些Internet视频实时应用对软硬件的性能要求很高,要求既达到较高的帧率,又达到较低的码率,所以需要足够强大的处理能力(包括算法及芯片处理能力)。而要具备这种处理能力,往往需要昂贵的专用设备。 
    对于安防所涉及的数字视频网络监控系统,由于行业特性所决定,数据采集点较多,需要相应配置大量的编码设备,因此,与其他视频网络实时应用相比,价格成为一个相对比较敏感的因素。 
    以往的数字视频网络监控系统,基本上都是基于局域网或者专网。但是实际应用环境却很难保证这样的网络条件,因此系统集成商无法给用户提供一个完整的解决方案。 
    例如银行的ATM机数字集中式监控系统,就可能需要提供基于Internet的解决方案:宽带为主,窄带为辅。 
    首先ATM机原来预留的专网入口需要传输业务数据,考虑到ATM机24小时在线的业务服务和24小时视频监控的要求,我们很难提供一种解决方式,在同一个专网上,既保证业务数据传输稳定,又保证监控画面流畅,因此,我们需要考虑从宽带运营商租用线路,通过宽带传输视频数据。而且,从运行模式和成本上考虑,很多ATM机并不需要随时传输视频数据,往往只在异常发生的情况下,主动要求监控中心切换监控点;或者在监控中心定时巡查各监控点的时候才需要在线。这种情况下,就不需要为ATM机常年租用线路,只需要开通ADSL、ISDN、甚至通过电话线连接的方式。 
    近两年,国内厂商不断推出高性能、高性价比的视音频压缩卡和嵌入式网络监控设备,使得基于Internet的数字视频网络监控系统成为可能,如上述ATM机数字集中式监控系统。

时间: 2024-10-17 17:38:20

视频编码的基本原理的相关文章

H.264/ACC音视频编码流的RTP/RTSP传输实现(2)

H.264编码基本原理 为达到良好的编码效率及性能,H.264编码器采用的仍是变换和预测的混合编码法,[[[] 毕厚杰. 新一代视频压缩编码标准: H. 264/AVC[M]. 人民邮电出版社, 2005]]其完整的编码过程如图2-1所示. 在H.264编码标准中,输入的帧或场Fn是以宏块为单位进行处理的,采样后的视频图像都被分成16*16的宏块每个宏块包括1个亮度子块和2个8*8的色度子块.在分割宏块后,宏块按照相应次序进行编码器进行压缩编码.在H.264编码过程中,首先按照根据编码速率.编码

转 常见视频编码方式以及封装格式

常见视频编码方式以及封装格式 常见视频编码方式 所谓视频编码方式就是指通过特定的压缩技术,将某个视频格式的文件转换成另一种视频格式文件的方式.视频流传输中最为重要的编解码标准有国际电联的H.261.H.263.H.264.H.265,运动静止图像专家组的M-JPEG和国际标准化组织运动图像专家组的MPEG系列标准,此外在互联网上被广泛应用的还有Real-Networks的RealVideo.微软公司的WMV以及Apple公司的QuickTime等. AVI AVI 是 Audio Video I

视频编码与封装方式详解

http://blog.csdn.net/attilax/article/details/5807047 1.    编码方式和封装格式    1 2.    视频编码标准两大系统    2 MPEG-1. 2 MPEG-2. 3 MPEG-3. 3 MPEG-4. 3 ITU-T. 4 WMV.. 4 3.    常用视频编码方式有Xvid( 4 4.    常见存储封装格式    6 5.    几种常见的转换格式设置    7 6.    无损视频编码    9 1.   编码方式和封装格

视频编码与视频格式的区别和联系

视频编码是一种压缩技术,就是把原始的视频流压缩成特定的比特流(视编码方案).视频格式是一种封装格式,就是把编码后的比特流进行封装,不同的视频格式封装方法不同.打个比方,原始的模拟视频采用MPEG2数字化编码后,你可以采用TS流格式封装成TS流文件,也可以采用PS流格式封装成PS流文件,选择权在于你,TS流是称为实时流,他把视频信息分成很多很小的包,损坏了一个包,你解码回放时只是看不见一小部分(例如出现马赛克),但是PS流是文件流,文件损害的话,整个文件都看不了了.再形象的说,一段视频资源用TS流

视频格式和视频编码是什么关系

编解码格式是数据按那种方式编码压缩,便于网络传输和降低带宽的需要:文件格式是将内容按具体的编码格式压缩后,以该文件所规定的格式进行封装的结果,即容器的概念,文件播放则按容器数据的存放方式解析,提取出编码数据然后解码后交由播放设备进行播放. 原始视频通过摄像头采集进来以后很庞大,要想在互联网上进行传输就必须要进行压缩,于是就有了编解码标准,原始视频文件经过压缩以后就有了不同的格式,比如通过h.264压缩的就是.264格式,其它的同理.而我们看的电影之类的视频(AVI,MPEG,MOV)除了包含图像

MPEG2与MPEG4在视频编码的简单比较

1 MPEG-2技术 MPEG-2的初衷是为广播级电视质量(CCIR601格式)的视音频信号定义的压缩编码标准,但最终结果是成为了一个通用的标准,能在很大范围内对不同分辨率和不同输出比特率的图像信号进行有效编码. MPEG-2的编码技术主要基于两个概念:即时间相关性与空间相关性.所谓时间相关性指的是物体前后运动的连续性,例如,一扇门的开启不可能是开关 两个状态,而一定是关.微开.开等一系列的连续动作,因此利用前一次的动作可以预测下一次的动作:空间相关性指的是空间内相邻物体的色彩和亮度是一个渐变

一种基于FSIM对视频编码图像质量客观评价的方法

一 为什么对视频编码图像质量客观评价     视频图像质量主观评价一般采用连续双激励质量度量法对任一观测者连续给出原始视频图像和处理过的失真图像,由观测者根据主观感知给出分值,其需针对多个视频对象进行多次重复实验,耗时多.费用高,难以操作:而视频编码图像的客观评价早期主要采用峰值信噪比(PSNR)或均方差(MSE)衡量视频序列的失真度,虽然其具有操作简单.成本低.易于实现的特点,但是由于其忽略了图像内容对人眼的影响,不能完整地反映出图像的质量.所以现实中还是多以主观评价方式为主的,码率影响视频请

(转)视频编码标准汇总及比较

MPEG-1 类型:Audio&Video 制定者:MPEG(Moving Picture Expert Group) 所需频宽:2Mbps 特性:对动作不激烈的视频信号可获得较好的图像质量,但当动作激烈时,图像就会产生马赛克现象.它没有定义用于额外数据流进行编对码的格式,因此这种技术不能广泛推广.它主要用于家用VCD,它需要的存储空间比较大. 优点:对动作不激烈的视频信号可获得较好的图像质量. 缺点:当动作激烈时,图像就会产生马赛克现象.它没有定义用于额外数据流进行编对码的格式,因此这种技术不

【转载】视频编码(H264概述)

一视频编码介绍 1.1 视频压缩编码的目标 1)保证压缩比例 2)保证恢复的质量 3)易实现,低成本,可靠性 1.2 压缩的出发点(可行性) 1)时间相关性 在一组视频序列中,相邻相邻两帧只有极少的不同之处,这便是时间相关性. 2)空间相关性 在同一帧中,相邻象素之间有很大的相关性,两象素越近,侧相关性越强. 根据采用的信源的模型分类: 1)基于波形的编码 如果采用“一幅图像由许多象素构成”的信源模型,这种信源模型的参数就是象素的亮度和色度的幅度值,对这些参数进行编码的技术即为基于波形编码. 2