多目视频序列的深度恢复.pdf

《多目视频序列的深度恢复.pdf》由会员上传分享，免费在线阅读，更多相关内容在应用文档-天天文库。

1、ADissertationSubmittedtoZhejiangUnivers‘tyfortheDegreeofVes1tUegreeMasterofEngineeringMulti-ocularVideoAuthor：Qi垒望兰i垒gLiSupervisor：垡堕．j堕旦堡垒QSubject：College：nr71鱼堕Q主金卫g丝垒垒旦gSubmittedDate：』垒卫望垒!Y圣Q!垒浙江大学硕士学位论文摘要随着3D技术的普及，三维数据的获取技术日渐受到人们的重视，在计算机视觉领域内，基于视频序列的深度恢复技术也逐渐成为研究的热点。虽然，针对动态场景，也有很多多目深度恢复技术相继被提出

2、，但是这些算法往往在鲁棒性、易用性上不尽如人意，如何用较少的相机，恢复出较好的深度是多目深度恢复的研究目标。本文分别结合双目相机和五目相机的特点，对其拍摄的视频序列，提出了相应的深度恢复算法。对于双目视频序列，在深度初始化阶段，采用了特殊的遮挡处理方法和基于分割的平面拟合策略来保证初始化深度的质量；在深度优化阶段，对静态像素运用集束优化，对动态像素根据光流寻找时域上的对应点来保证深度在时域上的一致性；另外，对于弱纹理区域的深度质量仍然很难保证的问题，提出了根据双侧分割结果对静态区域进行再初始化的策略。对于五目视频序列，针对不同相机间的成像效果会有差异的问题，提出了采用互信息(MutualIn

3、formation)进行立体匹配的算法框架，并结合视频序列的特点，利用前一帧深度作为当前帧的先验深度，取得了很好的效果。此外，本文还提出了一种对图像分块进行立体匹配求解的方法。利用这种分块策略，不仅对深度恢复结果几乎没有任何影响，还有效地避开了全局立体匹配算法的内存瓶颈。关键词：深度恢复，多视图，立体匹配，动态场景，互信息，分块Abstract塑翌奎兰堡主兰垡堡茎．————————————————————————————————一Withthep。pularizationof3Dtechnology,thetechniquesforobtainingt11reedimensionaldata

4、isattractmgm。rcandm。reattention·Thedepthrecovery钯ch?1：)gybased。nvide。is铲aduallybec。mingah。trcsearchinthefield。fc。mputerV1710mAlm。ughmanyaIgorimmsforthedepthrecoveryofdynamicsceneshavebeennroposed,thesemethodsareo缸nnotsatisfact。ry。ntherobusmessandusabil．it．y·HolwI-,Lto91etagooddepthwithfeWcameras，wh

5、ichisthe90al。fmeresearch。nmultl’0cuIar1111isnaDerdiScussesmecharacteristics。fbinocularcanleraandme-came．ra,an．dr--fproposesthec。眦spondingdepⅡlrecoVeryalgorithmsbaSed。nVideo．Forbin。伽l盯‘vid‘eo,we“lizea驴cialoccluSi。n-handlemeth。dandplane‘fittingstrategYbase．donse舯enttoensurethedepthquali够in也e-maliZati

6、onphase．Intheoptimizatl。r：phaSt：’we。dobundieoptim沱ationons鼬piXels，andfindtheco邮po耐ingpoints，ofdy竺Kpixelsaccordingtooptical．fl。wt。ensuretheSpatio-temporalconsis!ency’h．a?1t：：)：：：asthedepth。ftheweak．textureregionalwaysstillnotVerywenafterde譬h。pnml：：羔10n’wewillrle-initializethestaticregionsaccordingt0

7、t11eresultofbil蝴15唧e竺=E，、，6vP．Pameravideo’astheimagingquality。fdifferentcamerasarealwayss1．ghtIydifferent,weproposeastereomatchinfg．ramfreams，ewweochrk。w。sieththtehedempthutuma印lin。ftoprmreavtli。ouns．Consid