[发明专利]具有时空连续性的虚拟视点合成方法在审
| 申请号： | 201810698366.9 | 申请日： | 2018-06-29 |
| 公开（公告）号： | CN108833879A | 公开（公告）日： | 2018-11-16 |
| 发明（设计）人： | 姚莉;李小敏;吴含前 | 申请（专利权）人： | 东南大学 |
| 主分类号： | H04N13/117 | 分类号： | H04N13/117;H04N13/279 |
| 代理公司： | 南京苏高专利商标事务所(普通合伙) 32204 | 代理人： | 柏尚春 |
| 地址： | 211189 江*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提出了一种具有时空连续性的虚拟视点合成方法，该方法充分利用参考视点图像序列中相邻帧间的关联关系，从参考视点图像序列中提取出场景的全局静态背景图序列，并基于该全局背景图序列对左右参考视点图像序列合成的虚拟视点图像序列进行“伪影”消除和空洞填补。本发明不仅很好地解决了虚拟视点图像上的“伪影”和空洞问题，使单帧的虚拟视点图像质量大大提高，同时也很好地保持了虚拟视点图像的时空连续性。 | ||
| 搜索关键词： | 参考视点图像 虚拟视点图像 时空连续性 虚拟视点合成 伪影 虚拟视点图像序列 关联关系 静态背景 空洞填补 序列合成 背景图 图序列 相邻帧 单帧 全局 空洞 场景 | ||
【主权项】：
1.一种具有时空连续性的虚拟视点合成方法，其特征在于，包括以下步骤：(1)对左右参考视点图像序列中的深度图序列进行校正，所述校正包括：(1.1)判断深度图序列各相邻帧中相同位置处的两个像素是否处于同一深度层次，并使不同帧中处于同一深度层次的像素具有相同的深度值；(1.2)对单帧深度图进行滤波；(2)结合校正后的左右参考视点的深度图序列中的深度信息，从左右参考视点图像序列中分别提取出左右参考视点的全局静态背景图序列；(3)通过左右参考视点图像序列的前向映射和视点融合生成前期虚拟视点图像序列，并通过左右参考视点的全局静态背景图序列的前向映射和视点融合生成虚拟静态背景图序列；(4)标记出前期虚拟视点图像序列中每帧图像上有前景边缘干扰的区域，利用左参考视点对应帧中的前景边缘对所述区域进行修正，得到去除前景边缘干扰的真正“伪影”区域，并利用生成的虚拟静态背景图像序列消除修正后的前期虚拟视点图序列上的真正“伪影”区域。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于东南大学，未经东南大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201810698366.9/，转载请声明来源钻瓜专利网。
- 同类专利
- 增强现实的图像处理-201910275594.X
- 斯莱·嘉洋;罗曼·萨韦利耶夫 - 安谋知识产权有限公司
- 2019-04-08 - 2019-10-22 - H04N13/117
- 本公开的示例涉及用于处理在三维环境中捕获的图像以生成增强现实场景的计算设备。计算设备被配置为获得增强现实锚，该锚对应于现实世界环境中的位置和取向。计算设备被配置为经由数据通信从远程用户设备接收图像捕获数据。图像捕获数据包括由用户设备捕获的图像，该图像表示由用户设备观察到的现实世界环境。计算设备被配置为处理图像捕获数据以确定将锚映射到图像的空间数据。该空间数据可由远程用户设备使用以根据锚将虚拟对象插入到图像中，从而在远程用户设备处生成增强现实场景。计算设备被配置为经由数据通信将所确定的空间数据传输到远程用户设备。
- 演示教学的图像调整方法及装置-201910481990.8
- 赵飞;唐偲偲 - 宁波视睿迪光电有限公司
- 2019-06-04 - 2019-10-01 - H04N13/117
- 本发明实施例公开了一种演示教学的图像调整方法及装置，主要目的在于确保母终端和若干子终端的显示内容的真实性和3D趣味性，以达到最佳演示效果。主要技术方案包括：第一显示终端接收第二显示终端发送的控制命令，所述控制命令包括待显示图像及针对所述待显示图像的操作信息，所述操作信息由所述第二显示终端根据跟踪针对待显示图像操作所产生的位置变化生成；获取第一操作者的第一瞳距信息，以及获取第一操作者针对所述第一显示终端的第一眼睛定位信息；根据所述第一瞳距信息、所述第一眼睛定位信息及所述操作信息，动态调整所述待显示图像在所述第一显示终端的图像像素排列。应用于3D演示教学中。
- 一种视角处理方法及其处理系统-201910430732.7
- 蒋品;于洋;陈艺龙 - 北京光启元数字科技有限公司
- 2019-05-22 - 2019-08-16 - H04N13/117
- 本申请实施例公开了一种视角处理方法，包括：输入目标位置；根据所述目标位置的输入方式获取所述目标位置的切换信息；根据所述切换信息得到视角切换值；根据所述视角切换值平滑到所述目标位置，完成对视角的处理。本发明可以实现现有技术中不能实现的既可以通过预设目标位置的方式进行视角的切换，还可以通过非预设目标位置的方式进行视角的切换。
- 增强现实的再现方法、装置、系统、存储介质和处理器-201910122536.3
- 杨萌;戴付建;赵烈烽 - 浙江舜宇光学有限公司
- 2019-02-19 - 2019-06-07 - H04N13/117
- 本申请提供了一种增强现实的再现方法、装置、系统、存储介质和处理器，该方法包括：获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息；根据当前的环境光信息以及位置信息生成图像滤波模板，图像滤波模板用于修正虚拟媒体信息的亮度、色温和/或对比度；采用图像滤波模板对虚拟媒体信息的至少部分进行修正。该种方法不需要太多额外的计算资源，也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致，从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
- 虚拟现实装置及虚拟现实装置的操作方法-201810971370.8
- 何哲嘉;林佳纬 - 苏州乐轩科技有限公司
- 2018-08-24 - 2018-12-25 - H04N13/117
- 一种虚拟现实装置及虚拟现实装置的操作方法，其方法包含：虚拟现实装置根据一用户的一观看角度播放一对应视野的影像内容；及当虚拟现实装置侦测到一观看仰角大于一预定角度持续超过一预定时间时，该虚拟现实装置进入一锁定模式，于该锁定模式中，虚拟现实装置固定播放一主要视野的影像内容，当用户转动或移动时，虚拟现实装置播放影像内容视角不会改变。本发明可根据预设条件决定是否进入锁定模式，并在锁定模式下提供固定视野的主要影片内容，以达到方便用户使用及节省电量的功效。
- 具有时空连续性的虚拟视点合成方法-201810698366.9
- 姚莉;李小敏;吴含前 - 东南大学
- 2018-06-29 - 2018-11-16 - H04N13/117
- 本发明提出了一种具有时空连续性的虚拟视点合成方法，该方法充分利用参考视点图像序列中相邻帧间的关联关系，从参考视点图像序列中提取出场景的全局静态背景图序列，并基于该全局背景图序列对左右参考视点图像序列合成的虚拟视点图像序列进行“伪影”消除和空洞填补。本发明不仅很好地解决了虚拟视点图像上的“伪影”和空洞问题，使单帧的虚拟视点图像质量大大提高，同时也很好地保持了虚拟视点图像的时空连续性。
- 一种漫游实景VR的3D呈现方法-201610966978.2
- 聂颖彬 - 北京灵境世界科技有限公司
- 2016-10-28 - 2018-08-31 - H04N13/117
- 本发明提出了一种漫游实景VR的3D呈现方法，改善了现有技术中的3D呈现效果；包括沿需要漫游的方向进行全景视频拍摄，用以建立数字场景；根据观看者的瞳距及全景视频的参数确定侧向真3D时双眼帧差及正向假3D时数字场景中双眼对应的虚拟相机之间的距离；漫游中出现头部旋转时，分别计算出在全景视频中应调取的双眼场景和双眼对应的虚拟相机场景；本发明提出的漫游实景VR的3D呈现方法将正向假3D技术与侧向真3D技术相结合，能够在观看者转动头部观看的过程中实现顺畅的3D场景变化，在一定程度上改善了现有假3D的视觉效果，提供给观看者更高的视觉感受。
- 一种图像处理方法、用户终端、图像处理终端及系统-201310645595.1
- 尚国强;李明;吴平 - 南京中兴软件有限责任公司
- 2013-12-04 - 2018-08-21 - H04N13/117
- 本发明公开了一种图像处理方法、用户终端、图像处理终端及系统，其中，所述方法包括：用户终端上报基于不同视点的采集参数和多媒体数据资源；所述用户终端为位置不固定的任意用户终端；用户终端接收根据所述采集参数和所述多媒体数据资源得到的多视点合成的图像处理结果。
- 专利分类
