融合算法-天津大学研究生e-Learning平台课件.ppt

1、多视点分布式视频编码融合算法许颖2014.4.22内容简介三、融合算法三、融合算法二、边信息二、边信息一、一、MDVC多视点分布式视频编码（多视点分布式视频编码（MDVC）对于编码端资源受限系统，要求编码端的复杂度低，普通编解码系统的编码端复杂度是解码端的5-10倍，而分布式视频编码是对于相关信源进行独立编码和联合解码，将计算复杂度由编码端转移到解码端，从而降低编码端复杂度。多视点视频系统比单视点视频系统有很多优点，它可以提供更多的视频场景信息，但是它具有更加复杂的预测编码结构，相应的对视频系统的数据处理能力和传输带宽提出了更高的要求。多视点分布式视频编解码可以利用视点间的相关性大大降低编码端

2、的复杂度。图1 多视点分布式视频编码框图 边信息边信息MDVC中包括两种边信息：时间边信息：考虑到视点内部时间相关性视点间边信息：考虑到视点内部空间相关性融合算法融合算法n 时间边信息、视点间边信息判决n时间边信息、视点间边信息补偿n基于线性组合模型的融合算法n基于运动目标检测的融合算法图2 实验工艺流程图时间边信息、视点间边信息判决 tvtvMADMADifMADMADif视视点点间间边边信信息息，时时间间边边信信息息，融融合合边边信信息息MAD表示的是边信息与已解码关键帧的平均绝对误差，MADv，MADt分别表示视点间边信息、时间边信息与已解码帧的平均绝对误差时间边信息、视点间边信息补偿

3、基于块的思想，比较每个分块与已解码帧对应块的MAD，选择MAD小的块作为融合边信息对应块的像素值 tvtvMADMADifMADMADif视视点点间间边边信信息息，时时间间边边信信息息，融融合合边边信信息息基于线性组合融合的模型rlbfxtvvvvtxexf ,0,1)()1(定义)(1)(xfxfNTTTNNtnKxfKxfS)()(,基于运动目标检测的边信息融合算法 经过对一些视频的边信息提取，发现了一个规律，可以用来参考选择边信息的融合算法：时间边信息是针对同一个视点中，不同帧间的边信息提取，它的重构对于运动不太剧烈的物体质量比较高。而视点间边信息是针对不同视点在同一时刻的边信息提取，它

4、的重构对于运动剧烈的物体质量比较高。我们可以充分利用时间边信息与视点间边信息的重构质量进行边信息融合。由此，想到基于运动目标检测的边信息融合算法。基于运动目标检测的边信息融合算法original imge参考文献1 王宝亮，侯春萍，陈艳芳等.基于光栅立体手机的多视点自适应显示方法J.天津大学学报，2011，44(12):1037-1042.2 Han Bing，Wu Feng，Wu Dapeng.Image representation by compressive sensing for visual sensor networksJ.Visual Communication and Ima

5、ge Representation，2010,21(4):325-333.3 Xiaoyu Xiu,Gene Cheung,Jie Liang.Delay-Cognizant Interactive Streaming of Multiview Video With Free Viewpoint SysthesisJ,IEEE Transactions on Multimedia,2012,14(4):1109-1126.4 Feng Shao,Gangyi Jiang,Mei Yu,Ken Chen,Yo-sung Ho.Asymmetric Coding of Multi-View Vid

6、eo Plus Depth Based 3-D Video for View RenderingJ,IEEE Transactions on Multimedia,2012,14(1):157-167.5 Jin Young Lee,Ho-Cheon Wey,Du-Sik Park.A Fast and Efficient Multi-View Depth Image Coding Method Based on Temporal and Inter-View Correlations of Texture ImagesJ,IEEE Transactions on Circuits and S

7、ystems for Video Technology,2011,21(12):1859-1868.6 Dan Jiang,Jichang Guo,Xiaojia Wu.Low-complexity distributed multi-view video coding for wireless video sensor networks based on compressive sensing theoryJ,Neurocomputing,2012,07(54):1-7.7 武晓嘉,郭继昌,姜丹,等.一种多视点立体视频分布式压缩感知编解码模型J.天津大学学报,2012,45(10):895-

8、902.8 Puri R,Majumdar A,Ramchandran K.PRISM:a video coding paradigm with motion estimation at the decoderJ.IEEE Transactions on Image Processing,2007,16(10):2436-2448.参考文献9 Aaron A,Zhang R,Girod B.Wyner-Ziv coding of motion videoC/Conference Record of the Thirty-Sixth Asilomar Conference on Signals,

9、Systems and Computers.IEEE,2002,1:240-244.10 Artigas X,Ascenso J,Dalai M,et al.The DISCOVER codec:architecture,techniques and evaluationC/Picture Coding Symposium.Lisbon,Portugal,2007,17(9):1103-1120.11 林昕,刘海涛,王嘉男.多视点分布式视频编码的研究J.哈尔滨工程大学学报,2010,31(008):1093-1099.12 Xiao F,Liu J,Guo J,et al.Novel Side Information Generation Algorithm of Multiview Distributed Video Coding for Multimedia Sensor NetworksJ.International Journal of Distributed Sensor Networks,2012.13 Y.Pang,W.Li,Y.Yuan,J.Pan,Fully affine invariant SURF for image matchingJ,Neurocomputing,2012,85(1)6-10.谢 谢！