收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于深度全景视频的虚拟场景绘制技术研究

姜忠鼎  
【摘要】:随着几何建模技术的快速发展,构建高度复杂的三维场景已经变得相对容易。这些复杂场景通常包含几千万甚至上亿个三角形和丰富的纹理,大大超过了目前图形硬件的处理能力。实时生成这些复杂虚拟场景的高度真实感画面仍然是一个非常具有挑战性的任务。 传统基于几何的绘制系统使用模型简化和可见性剔除技术,通过牺牲画面质量来实现场景的快速绘制。与此不同,基于图像的绘制(Image-Based Rendering-IBR)技术利用实拍或者计算机合成的图像序列来生成高质量的目标画面。由于它的绘制速度与场景几何复杂度无关,因此可在普通PC上实现复杂场景的实时绘制。 目前绝大部分IBR技术的主要不足有:没有考虑输入图像的分辨率对绘制质量的影响,其绘制效果严重依赖于输入图像的分辨率;场景表示复杂、数据难以获取和压缩、绘制算法没有充分利用图形处理器(GPU)的可编程性来提高系统性能。考虑到许多商品化软件可生成逼真的图像序列,本文重点研究面向虚拟场景的IBR技术来克服现有方法的上述不足。本文的主要创新工作有: (1) 以提出的三维变换方程、深度图像三角形网格重建算法和视点空间Z偏移算法为基础,提出了一种新的多幅深度图像混合绘制技术来处理视点相关的光照效果。该技术巧妙地使用最新图形处理器提供的浮点混合功能来实现片元(Fragment)颜色的累加,从而使得由几百幅深度图像来绘制目标图像成为可能。 (2) 提出了一个基于图像的虚拟场景可伸缩绘制框架。该框架以深度全景视频作为场景表示的基本单元,通过多段深度全景视频组成的复合结构来表示整个虚拟场景。考虑到运算主机(PC、移动设备)的GPU和CPU的处理能力存在很大差异,提供了深度全景视频环绘制技术、路径全景视频环绘制技术和采用服务器推(Server Pushing)运行模式的路径全景视频绘制系统等三种IBR技术/系统来实现虚拟场景的交互显示。 具体地,深度全景视频环绘制技术要求CPU和GPU都具有很强的处理能力, 浙江大学博士学位论文 它允许视点在漫游平面的某封闭区域内自由运动,它根据目标视点参数来选择深 度全景视频环中对目标图像有贡献的候选区域,利用多幅深度图像混合绘制技术 对候选区域进行绘制来生成目标图像;路径全景视频环绘制技术需要CPU具有 很强的处理能力,它结合了同心拼图和无结构流明图绘制技术的优点,可生成路 径全景视频环内任意视点的目标图像;采用服务器推运行模式的绘制系统基于客 户一服务器体系结构,它主要面向CPU和GPU处理能力都很弱的移动设备。服 务器进程负责将绘制目标图像所需的压缩数据通过无线网络发送给客户进程,客 户进程对接收的数据进行解压并通过本地warping来生成目标视点图像。该系统 还使用多路缓存队列对接收的压缩数据和解压数据进行缓存来提高响应速度。 (3)提出了椭圆加权平均(Elliptieal Weighted彻erage一E场人)超分辨率算法 来提高IBR系统绘制质量。我们将 EV认A滤波技术引入超分辨率成像,采用E认今气 滤波器对点扩散函数和反投影滤波器进行建模。由于E认叭滤波器属于各向异性 滤波器,它可以很好地模拟点扩散函数和反投影滤波器的空间变化特性。我们还 设计了一种检测错误匹配像素的快速、可靠方法,通过在超分辨率重建过程中忽 略错误匹配像素来去除错盈爸们对结果图像的影响。实验结果表明,该算法不仅 可以从IBR系统生成的合成视频中重建高质量的超分辨率图像,它还可以处理 包含复杂遮挡和场景变化的动态视频片段。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 张琼;杜连艳;;虚拟城市场景的构建及其在城市规划中的应用[J];国土与自然资源研究;2011年03期
2 薛菲;张荣国;陈大川;张建国;;基于粒子系统的雪景模拟算法研究与实现[J];计算机与数字工程;2011年06期
3 陶声祥;王书宇;沈欢;;基于虚拟场景的捷联图像制导半实物仿真关键技术[J];弹箭与制导学报;2011年03期
4 马静;;虚拟三维语音教室的构建技术研究[J];硅谷;2011年17期
5 龚轩涛;;基于包围盒碰撞检测算法研究[J];黑龙江科技信息;2011年24期
6 赵磊;赵罡;谈敦铭;;基于八叉树的复杂产品模型实时绘制技术[J];工程图学学报;2011年03期
7 孟祥增;马萍;刘瑞梅;;三维虚拟场景的创设与立体播放[J];中国电化教育;2011年08期
8 施斌;刘惠义;赵建平;年福纯;;虚拟场景中路径自动选择算法[J];兵工自动化;2011年07期
9 张世辉;张煜婕;孔令富;;结合深度图像和最佳分割阈值迭代的自遮挡检测算法[J];高技术通讯;2010年07期
10 过洁;徐晓旸;潘金贵;;虚拟场景的一种快速优化Kd-Tree构造方法[J];电子学报;2011年08期
11 江嘉晋;刘胜兰;李博;;基于图像频谱分析三维网格模型数字浮雕生成算法[J];机械制造与自动化;2011年04期
12 黄树林;周斌斌;宗原;刘婷婷;朱斌;刘一松;;基于语义虚拟环境的虚拟人动画研究与实现[J];计算机应用研究;2011年08期
13 何丽;;三维虚拟场景漫游技术研究与实现[J];福建电脑;2011年05期
14 张全贵;闫健卓;王普;;基于智能组件的虚拟场景建模[J];北京工业大学学报;2011年07期
15 朱梅;陈健伟;;基于VR的虚拟场景生成算法研究[J];软件导刊;2011年06期
16 李军强;王娟;赵海文;刘今越;;基于虚拟现实的外骨骼式远程康复系统[J];机械设计与研究;2011年04期
17 刘悦;;EON Studio技术使印刷教学直观生动[J];印刷工业;2011年07期
18 杨晓;廉静静;张新宇;;基于OSG的虚拟场景中包围盒碰撞检测的研究[J];计算机技术与发展;2011年09期
19 张彤;王大虎;;基于OSG的虚拟校园漫游系统的设计与实现[J];计算机时代;2011年06期
20 吴艳君;;基于Virtools的虚拟漫游系统设计与实现[J];现代电子技术;2011年12期
中国重要会议论文全文数据库 前10条
1 王恒;赵亮;;深度图像的平面分割算法[A];第十七届中国遥感大会摘要集[C];2010年
2 华锋;黄建国;;水下武器作战系统的虚拟场景生成技术[A];'2000系统仿真技术及其应用学术交流会论文集[C];2000年
3 张七一;戴贤妙;李萍;;基于VC和EON的虚拟场景交互研究与实现[A];'2010系统仿真技术及其应用学术会议论文集[C];2010年
4 张小超;王精业;朱敏洁;李潞飞;;虚拟场景漫游系统的体系结构分析[A];第五届全国仿真器学术会论文集[C];2004年
5 谈国新;周穆雄;钟正;;虚拟场景中多Agent行为交互技术研究[A];第六届和谐人机环境联合学术会议(HHME2010)、第19届全国多媒体学术会议(NCMT2010)、第6届全国人机交互学术会议(CHCI2010)、第5届全国普适计算学术会议(PCC2010)论文集[C];2010年
6 王政;蔡鸿明;何卫平;余隋怀;;基于二维图像的虚拟场景控制[A];中国图象图形学会第十届全国图像图形学术会议(CIG’2001)和第一届全国虚拟现实技术研讨会(CVR’2001)论文集[C];2001年
7 励映群;王润杰;熊壮;陈蕾;;虚拟场景中视点运动控制的研究与应用[A];第五届全国仿真器学术会论文集[C];2004年
8 王建宇;吴慧中;;基于图像的虚拟场景漫游系统[A];中国图象图形学会第十届全国图像图形学术会议(CIG’2001)和第一届全国虚拟现实技术研讨会(CVR’2001)论文集[C];2001年
9 刘学超;;Web3D中复杂交互的实现[A];全国第20届计算机技术与应用学术会议(CACIS·2009)暨全国第1届安全关键技术与应用学术会议论文集(下册)[C];2009年
10 徐秀英;刘卓;王博亮;;一种基于三角函数的深度图像曲面拟合方法[A];第十二届全国图象图形学学术会议论文集[C];2005年
中国博士学位论文全文数据库 前10条
1 赵健;虚拟场景的视点质量评价与绘制优化问题研究[D];国防科学技术大学;2010年
2 姜忠鼎;基于深度全景视频的虚拟场景绘制技术研究[D];浙江大学;2004年
3 杨本臣;基于对等网络的WebVR系统关键技术研究[D];辽宁工程技术大学;2012年
4 范剑英;结构光深度图像获取和处理与三维重建研究[D];哈尔滨理工大学;2010年
5 李世飞;基于深度图像的三维目标识别技术研究[D];国防科学技术大学;2010年
6 王筱婷;基于Voronoi图的虚拟场景漫游关键技术研究[D];山东大学;2012年
7 杭燚;火炮虚拟现实技术研究[D];南京理工大学;2007年
8 全红艳;基于几何与图像结合的虚拟场景绘制技术研究[D];哈尔滨工业大学;2006年
9 柳伟;三维模型特征提取与检索[D];上海交通大学;2008年
10 丁雅斌;隐式表达三维模型流水线的关键技术研究[D];天津大学;2007年
中国硕士学位论文全文数据库 前10条
1 王晓燕;基于图像的虚拟场景的研究与实现[D];解放军信息工程大学;2006年
2 张辉;基于图像的虚拟现实技术研究[D];西安理工大学;2002年
3 高伟江;基于视频技术的交通标线视觉评价方法的研究[D];长安大学;2008年
4 肖平;立体式虚拟校园的场景规划与设计[D];华中师范大学;2006年
5 孙文静;虚拟场景实时生成技术研究[D];西安电子科技大学;2007年
6 万宁;基于虚拟场景的实验教学课件设计与开发[D];四川师范大学;2007年
7 师东英;虚拟场景的研究与实现[D];西安电子科技大学;2009年
8 刘国庆;虚拟校园的建模技术研究[D];中国石油大学;2008年
9 肖嵬;虚拟现实技术在校园网络管理中的应用研究[D];重庆师范大学;2009年
10 魏玲;航道工程整治设计三维可视化研究[D];河海大学;2005年
中国重要报纸全文数据库 前10条
1 ;将来天气这样预报:塔子山公司有暴雨[N];成都日报;2006年
2 本报记者 赵晓霞;高科技盘点“老家底”[N];人民日报海外版;2008年
3 赵晓光徐福健;IBM开创新的虚拟学习方式[N];大众科技报;2007年
4 本报记者 施艳燕;学几招生活中的急救法[N];苏州日报;2005年
5 ;AMD开设“虚拟旗舰”店[N];民营经济报;2008年
6 谭薇 编译;人人都能变成“阿凡达”[N];第一财经日报;2011年
7 本报记者 汪敏华 第五同;满目皆新[N];解放日报;2000年
8 王亮;新浙商:鼠标置地[N];经济观察报;2006年
9 ;中国下一代互联网开始启动[N];中国成人教育信息报;2001年
10 本报记者 张惠;网游虚拟赛道打起实物广告[N];成都日报;2005年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978