[发明专利]一种基于双目图像和对象轮廓的虚实遮挡处理方法有效

专利信息
申请号: 201110294400.4 申请日: 2011-09-30
公开(公告)号: CN102509343A 公开(公告)日: 2012-06-20
发明(设计)人: 陈小武;赵沁平;李青;赵东悦 申请(专利权)人: 北京航空航天大学
主分类号: G06T15/40 分类号: G06T15/40;G06T7/00
代理公司: 北京科迪生专利代理有限责任公司 11251 代理人: 许玉明;顾炜
地址: 100191*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要: 发明是一种基于双目图像和对象轮廓的虚实遮挡处理方法,包括:通过交互式图像分割算法准确计算出真实对象的区域轮廓,作为真实对象的几何形状信息;根据视差与深度的负相关关系,估算虚实对象在当前视角下的视差,确定当前场景中虚实对象的相对深度信息,划分出场景层次。利用相对深度信息估计确定虚实对象间的前后遮挡关系,不需要逐像素计算深度信息;在二维图像空间实现虚实遮挡处理,判断虚实对象间是否存在遮挡并进行相应处理,能适用于大多数的遮挡情况,达到较好的虚实遮挡处理效果。本发明可广泛应用到交互式数字娱乐、体育研究与训练模拟、远程教育与培训等虚拟现实系统的空间遮挡处理中。
搜索关键词: 一种 基于 双目 图像 对象 轮廓 虚实 遮挡 处理 方法
【主权项】:
一种基于双目图像和对象轮廓的虚实遮挡处理方法,其特征在于包括以下步骤:(1)利用交互式的前景背景二值分割方法,将当前视角下场景视频图像中感兴趣的真实对象的轮廓信息提取出来;(2)根据视差和深度的负相关关系,估算各对象的视差信息,比较得到各对象的相对深度信息,按离摄像机远近距离划分场景对象的层次,从而获得可能存在的对象之间前后遮挡关系;(3)根据交互式提取的对象区域轮廓信息和由视差估算的相对深度信息,在绘制虚拟对象时判断是否存在遮挡和被遮挡,并进行相应虚实遮挡处理,最终生成满足遮挡要求的增强现实场景。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京航空航天大学,未经北京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/201110294400.4/,转载请声明来源钻瓜专利网。

同类专利
  • 虚拟现实三维水体渲染中水体网格的处理方法-201610765196.2
  • 熊波 - 北京像素软件科技股份有限公司
  • 2016-08-30 - 2019-05-14 - G06T15/40
  • 本申请公开了一种虚拟现实三维水体渲染中水体网格的处理方法,包括:根据水体网格中各顶点的高度数据、以及相同单元格的地面网格中各顶点的高度数据,确定该水体网格与该地面网格的高低关系;针对每个水体网格,执行如下处理:当该水体网格低于地面网格时,删除该水体网格;当该水体网格与地面网格相交时,将该水体网格中高于该地面网格的部分保留,将该水体网格中低于该地面网格的部分删除;当该水体网格高于地面网格时,保留该水体网格;对于所述高于地面网格的水体网格,计算水体网格的水深,按照幂级数的方式合并水深高于预定水深的水体网格。本发明可以降低对计算资源的使用量并减少无效渲染数量,提高渲染效率。
  • 用于图形处理的零像素剔除-201680041182.4
  • N·杜瓦鲁;王韬;梁坚;王春林 - 高通股份有限公司
  • 2016-05-26 - 2019-05-14 - G06T15/40
  • 一种图形处理单元GPU可包含三角形设置引擎TSE,所述TSE经配置以确定三角形的坐标、基于某一角度来旋转所述三角形的坐标。为了旋转所述坐标,所述TSE生成所述三角形在旋转域中的坐标,且基于所述三角形在所述旋转域中的所述坐标来确定所述旋转域中的包围盒的坐标。所述TSE确定所述旋转域中的第一多个平行扫描线和所述旋转域中的第二多个平行扫描线。所述第一和第二多个扫描线垂直。所述TSE确定所述包围盒坐标是否位于两个相邻扫描线内。如果所述包围盒坐标位于所述两个相邻扫描线内,那么所述TSE从所述场景移除所述三角形。
  • 用于高效深度预过程的方法和装置-201780050779.X
  • M·安德森;T·G·阿凯奈-莫勒;J·N·哈塞尔格林 - 英特尔公司
  • 2017-08-11 - 2019-04-16 - G06T15/40
  • 描述了一种用于执行高效深度预过程的装置和方法。例如,方法的一个实施例包括:一种方法,包括:在仅深度渲染活动的情况下执行通过图形流水线的指定部分的第一过程;在所述第一过程期间对所述图形流水线的所述指定部分内的粗糙深度缓冲器进行初始化,所述粗糙深度缓冲器以与存储在每像素深度缓冲器中的深度数据的粒度级别相比而言较小的粒度级别来存储深度数据,所述每像素深度缓冲器在所述第一过程期间未被初始化;以及在所述第一过程之后执行通过所述图形流水线的第二过程,所述第二过程利用全部图形流水线并使用通过所述第一过程初始化的所述粗糙深度缓冲器中的值。
  • 基于图块的计算机图形渲染中细分面数据的面片-201310713479.9
  • S·J·菲什威克;J·W·豪森 - 想象技术有限公司
  • 2013-12-20 - 2017-10-24 - G06T15/40
  • 在基于图块的计算机图形系统中从一个或多个图块中拣出面数据的面片的方法和系统。渲染空间被分成可读的面数据的面片和多个图块。然后,对所述面片的至少部分进行分析以确定表示在至少一个图块上评估的极限深度值的数据。这可包括对面数据的面片进行细分以得到多个细分的图元,并且分析细分的图元中的至少一些。对于面片位于其中的每一个图块,表示极限深度值的数据被用于确定该面片是否隐藏在该图块中,并且如果该面片被确定未隐藏在至少一个图块中,则渲染该面片的至少部分。
  • 图形处理系统-200910159598.8
  • J·尼斯塔德;B·约斯兰;E·索尔加德 - ARM有限公司
  • 2009-06-04 - 2017-10-20 - G06T15/40
  • 本发明涉及图形处理系统。当渲染包括由多个单独基元组成的复杂对象的场景1时,不是依次处理组成对象的每个基元,而是生成包围复杂对象的边界体积4,并且然后使用边界体积4而不是组成复杂对象的实际基元来处理场景1。如果确定在场景中对象的边界体积表示4将被完全遮挡(例如,被前景对象2遮挡),则不对组成复杂对象的单独基元进行处理。这能够显著地节省用于场景1的处理时间和资源。
  • 混合隐藏线处理器和方法-201280048164.0
  • 加里·拉蒙·马钱特;沙伊列什·拉特纳卡·卡迈尔卡尔 - 西门子产品生命周期管理软件公司
  • 2012-09-21 - 2017-09-15 - G06T15/40
  • 一种用于提供针对多个多边形的混合隐藏线处理的方法,所述多边形表示曲面细分的图像数据,其中每个多边形包括多条边。该方法包括生成(506)背面板和正面板,其中,背面板包括位于曲面细分的图像数据的轮廓的背面侧上的多边形,正面板包括位于曲面细分的图像数据的轮廓的正面侧上的多边形;追踪(514)边并且识别被追踪的边的子集中的每条被追踪的边的至少一个可见性改变像素;针对每个可见性改变像素,确定(522)被追踪的边是否来自与对应于可见性改变像素的多边形相同的板;针对被确定为来自与对应于可见性改变像素的多边形相同的板的每个被追踪的边,显示(532)被追踪的边。
  • 确定并存储描述第一网格多边形集合的信息的方法和系统-201710146418.7
  • 巴里·林恩·詹金斯 - 巴里·林恩·詹金斯
  • 2011-06-29 - 2017-09-01 - G06T15/40
  • 本发明涉及确定并存储描述第一网格多边形集合的信息的方法和系统。网格多边形形成多边形网格,第一网格多边形集合从第一视区看去可见。该方法包括确定并存储从第二视区看去可见的第二网格多边形集合,第二视区包含所述第一视区;确定并存储指示至少一个网格多边形的信息,该至少一个网格多边形属于相连网格多边形集合,该相连网格多边形集合从第一视区看去可见;以及确定并存储指示该至少一个相连网格多边形集合的至少一个边界边的信息。
  • 使用所存储的信息确定第一网格多边形集合的方法和系统-201710146760.7
  • 巴里·林恩·詹金斯 - 巴里·林恩·詹金斯
  • 2011-06-29 - 2017-08-25 - G06T15/40
  • 本发明涉及使用所存储的信息确定第一网格多边形集合的方法和系统。网格多边形形成多边形网格,来自网格多边形的第一网格多边形集合从第一视区看去可见。该方法包括检索从第二视区看去可见的第二网格多边形集合,第二视区包含第一视区;检索指示至少一个第一网格多边形的信息,该至少一个第一网格多边形属于相连网格多边形集合,相连网格多边形集合从第一视区看去可见;检索指示该至少一个相连网格多边形集合的至少一个边界边的信息;遍历属于第二网格多边形集合的该至少一个相连网格多边形集合,该遍历包括在该至少一个第一网格多边形处开始该遍历,以及当在该遍历期间遇到该至少一个边界边时中断该遍历。
  • 图形信息的基于导航的预取发送或接收的控制方法和系统-201710146762.6
  • 巴里·林恩·詹金斯 - 巴里·林恩·詹金斯
  • 2011-06-29 - 2017-08-25 - G06T15/40
  • 本发明涉及图形信息的基于导航的预取发送或接收的控制方法和系统。提供了在服务器上执行的用于对图形信息向客户端设备的基于导航的预取发送进行控制的方法。图形信息包括从第二视区看去可见而从第一视区看去不可见的第一组图形信息,并且图形信息包括从第二视区看去可见而从第一视区看去不可见的第二组图形信息,第二组图形信息的细节层次低于第一组图形信息的细节层次。该方法包括确定第一时段,在第一时段期间,第一组图形信息将在客户端设备被安排访问客户端设备上的第一组图形信息之后到达;以及在第一时段期间发送第二组图形信息。
  • 用于基于目的地阿尔法值减少图形处理系统中的存储器存取带宽的技术-201380011369.6
  • 安德鲁·格鲁贝尔 - 高通股份有限公司
  • 2013-02-08 - 2017-05-10 - G06T15/40
  • 本发明描述用于基于目的地阿尔法值减少图形处理系统中的存储器存取带宽的技术。所述技术可包含从频段缓冲器检索目的地阿尔法值,所述目的地阿尔法值是响应于处理与第一基元相关联的第一像素而产生。所述技术可进一步包含基于所述目的地阿尔法值确定是否执行致使不从纹理缓冲器检索用于第二像素的一或多个纹理值的动作。在一些实例中,所述动作可包含在所述第二像素到达像素处理管线的纹理映射级之前,将所述第二像素从所述像素处理管线丢弃。所述第二像素可与不同于所述第一基元的第二基元相关联。
  • 确定从视区看去可见的网格多边形或所述网格多边形的分段的集合的方法及系统-201180042082.0
  • 巴里·林恩·詹金斯 - 巴里·林恩·詹金斯
  • 2011-06-29 - 2017-04-12 - G06T15/40
  • 一种方法,确定从具有多个视区顶点的视区看去可见的网格多边形或所述网格多边形的分段的集合,所述网格多边形形成多边形网格。该方法包括确定该视区与所述多边形网格之间的至少一个支撑多边形。该方法进一步包括根据该至少一个支撑多边形构造至少一个楔,该至少一个楔远离该视区而延伸从而超出至少所述多边形网格。此外,该方法包括确定所述楔与所述网格多边形的一个或多个相交部。此外,该方法包括使用该至少一个楔与所述多边形网格的所确定的一个或多个相交部来确定从该视区看去可见的所述网格多边形或所述网格多边形的分段的集合。
  • 增强现实系统中基于虚拟模型预处理的虚实遮挡处理方法-201310409925.7
  • 宋荆洲;杨琼;贾庆轩;孙汉旭 - 北京邮电大学
  • 2013-09-10 - 2014-01-01 - G06T15/40
  • 本发明涉及增强现实系统中基于虚拟模型预处理的虚实遮挡方法,包括步骤:利用深度摄像头KINECT获取彩色图像和表征深度信息的灰度图像;将该彩色图像转换成增强现实虚实遮挡系统能识别跟踪的位图图像并三维注册虚拟模型;结合虚拟模型三维注册位置和虚拟模型自身深度对灰度图像进行阈值处理并提取真实物体外围轮廓;在虚拟模型渲染场景中,三维注册轮廓坐标系;将二维轮廓顶点坐标转换为对应实际大小的三维坐标并在轮廓坐标系中绘制,重新绘制的轮廓作为“三维模型”能遮挡虚拟模型;合成彩色图像与处理后的虚拟模型,轮廓内部区域即虚拟模型被遮挡部分被真实物体图像填充,获得虚实遮挡效果。本发明无需预先建模和逐个像素比较虚拟模型深度信息,适用于未知变化的环境,能够满足实时性要求。
  • 图像生成装置、图像生成方法、图像生成程序及集成电路-201280002288.5
  • 石桥裕大 - 松下电器产业株式会社
  • 2012-09-25 - 2013-09-18 - G06T15/40
  • 在使用Z缓冲器法对像素进行描绘的图像生成装置中,其特征在于,具备:统计量计算机构,计算表示Z值在一个场景中的分布特征的统计量,该Z值表示上述像素的深度;Z值变换机构,使用上述统计量将上述Z值变换为已变换Z值;Z值生成机构,使用上述已变换Z值生成比特数少于上述Z值的第一Z值,使用上述已变换Z值或上述Z值生成第二Z值;以及比较机构,使用存储在第一存储器中的上述第一Z值进行第一深度比较,在通过上述第一深度比较不能进行深度的判断的情况下,再使用存储在第二存储器中的上述第二Z值进行第二深度比较。
  • 用于实时渲染的依赖于连接性的几何学优化-201080054911.2
  • J.M.厄斯特万;T.雅各布森;J.S.雅各布森 - 乐高公司
  • 2010-09-10 - 2012-11-14 - G06T15/40
  • 公开了一种计算机实现的用于显现/渲染计算机模型的方法,所述计算机模型包括多个组件,其中所述方法包括:存储所述多个组件的至少一个的多个部件,每个部件包括用于显现/渲染该部件的几何学信息;存储指示多个组件在坐标系中的位置和方向的信息;确定各个组件之间的空间关系;基于所确定的各个组件之间的空间关系,对于至少一个组件确定多个存储的部件,以用于显现/渲染所述组件。通过使用组件之间的空间关系来确定多个部件以用于显现/渲染组件,可以使用有关各个组件的几何学以及组件与其他组件的连接的知识来找到可以移除的隐藏部件。
  • 三维角色扮演游戏中实现动态阻挡的方法、装置及系统-201110065231.7
  • 罗恒希 - 腾讯科技(深圳)有限公司
  • 2011-03-17 - 2012-09-19 - G06T15/40
  • 本发明公开了一种三维角色扮演游戏中实现动态阻挡的方法、装置及系统。预先在投影形成的二维游戏场景中,设置需要动态阻挡的区域,建立各设置的动态阻挡区域标识及对应的阻挡类型的映射关系表,保存于文件,分发给服务器和客户端,客户端存储映射关系表,建立三维游戏场景与二维游戏场景的映射关系;确定搜索得到的下一动态阻挡区域包含游戏事件时,获取该游戏事件所属的动态阻挡区域标识;根据服务器返回的携带动态阻挡区域标识的阻挡类型信息,更新建立的映射关系表;根据更新的映射关系表,确定游戏路径,并根据确定的游戏路径,获取该动态阻挡区域标识的阻挡类型对应的游戏操作策略,进行操作。应用本发明,可以降低用户成本、提高同步效率。
  • 具有延缓的顶点遮影的图形处理单元-201080022750.9
  • 焦国方;杜云;陈令军;于春 - 高通股份有限公司
  • 2010-05-28 - 2012-07-18 - G06T15/40
  • 本发明描述用于以使用延缓的顶点遮影的图形处理单元(GPU)来处理图形图像的技术。一种实例方法包括以下步骤:在图形处理单元(GPU)的处理管线内针对图像几何形状内的每一图元的顶点产生顶点坐标,其中所述顶点坐标包含所述顶点中的每一者的位置和透视参数,且其中所述图像几何形状表示图形图像;在所述GPU的所述处理管线内基于所述顶点坐标来识别所述图像几何形状内的可见图元;以及响应于识别所述可见图元而在所述GPU的所述处理管线内仅针对所述可见图元的顶点产生顶点属性以便确定所述图形图像的表面性质。
  • 一种多视点自由立体显示的三维增强现实方法-201110412061.5
  • 刘灵珊;李阳;李东晓;王梁昊;张明 - 浙江大学
  • 2011-12-12 - 2012-07-11 - G06T15/40
  • 本发明公开了一种多视点自由立体显示的三维增强现实方法。它的步骤如下:1)双目相机立体拍摄自然场景;2)提取并匹配主相机图像的特征点,实时产生自然场景的三维点云图并计算相机参数;3)计算主相机图像对应的深度图,绘制虚拟视点图像及其深度图并作空洞修复;4)三维制作软件绘制三维虚拟模型,虚实融合模块实现多个视点图像的虚实融合;5)将多路虚实融合图像进行适当的合成;6)3D显示设备提供多视点立体显示。本发明采用双目相机立体拍摄,采用实时性较好的特征提取与匹配技术,不需在自然场景中作标记;虚实融合模块可以实现虚实场景的光照一致性和无缝融合;3D立体显示设备可提供多人多角度的裸眼多视点立体显示效果。
  • 一种基于双目图像和对象轮廓的虚实遮挡处理方法-201110294400.4
  • 陈小武;赵沁平;李青;赵东悦 - 北京航空航天大学
  • 2011-09-30 - 2012-06-20 - G06T15/40
  • 本发明是一种基于双目图像和对象轮廓的虚实遮挡处理方法,包括:通过交互式图像分割算法准确计算出真实对象的区域轮廓,作为真实对象的几何形状信息;根据视差与深度的负相关关系,估算虚实对象在当前视角下的视差,确定当前场景中虚实对象的相对深度信息,划分出场景层次。利用相对深度信息估计确定虚实对象间的前后遮挡关系,不需要逐像素计算深度信息;在二维图像空间实现虚实遮挡处理,判断虚实对象间是否存在遮挡并进行相应处理,能适用于大多数的遮挡情况,达到较好的虚实遮挡处理效果。本发明可广泛应用到交互式数字娱乐、体育研究与训练模拟、远程教育与培训等虚拟现实系统的空间遮挡处理中。
  • 一种共享增强现实场景中协同式虚实遮挡处理方法-201110284734.3
  • 陈小武;赵沁平;金鑫;林鸿昌;宋亚斐 - 北京航空航天大学
  • 2011-09-22 - 2012-06-20 - G06T15/40
  • 本发明公开了一种共享增强现实场景中协同式虚实遮挡处理方法。包括步骤:首先生成增强现实场景,然后估计待观测点位置,将待分析遮挡关系的虚拟对象和真实对象均投影到该待观测点的观测平面上,以该待观测点为原点,取垂直于所述成像平面的射线,沿水平方向扫过所述观测平面,再根据所述射线扫过观测平面时,碰触到虚拟对象和真实对象的两侧边缘的先后顺序,进行遮挡编码,最后根据遮挡编码的不同,确定该待观测点观测到的虚拟对象和真实对象是处于遮挡关系还是处于非遮挡关系,最后具体判断是虚遮挡实,还是实遮挡虚,减少误判。本发明实现了快速判断新视频序列区域内的虚实对象空间遮挡关系,提高了判断增强现实场景中虚实遮挡关系的准确率。
  • 影像物件的隐藏面移除的预先拣选方法及系统-201110020605.3
  • 蔡宗谕;吴裘宏 - 威盛电子股份有限公司
  • 2011-01-12 - 2011-06-15 - G06T15/40
  • 一种影像物件的隐藏面移除的预先拣选方法及系统。该预先拣选方法包括:执行一前处理操作,以取得一多边形的多个象限;将一人眼坐标自一人眼空间转换至该多边形所在的一模型空间中;根据该人眼坐标所在的其中一象限,比对该人眼坐标的一法向量与该多边形的每一工作面的法向量,以判断该多边形的每一工作面相对于该人眼坐标为正面或反面。本发明在执行绘制操作时可省去坐标转换与光源照射的过程以及减少实时计算步骤。
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top