[发明专利]一种基于多模态数据和美学原理的神经网络生成视频摘要的方法有效
| 申请号： | 202110916764.5 | 申请日： | 2021-08-11 |
| 公开（公告）号： | CN113626641B | 公开（公告）日： | 2023-09-01 |
| 发明（设计）人： | 卢少平;谢杰航;杨愚鲁 | 申请（专利权）人： | 南开大学 |
| 主分类号： | G06F16/74 | 分类号： | G06F16/74;G06F16/75;G06F16/78;G06F16/33;G06F16/35;G06V20/40;G06V20/62;G06V10/762;G06V10/764;G06V10/82;G06N3/0455;G06N3/0442;G06N3/08 |
| 代理公司： | 天津耀达律师事务所 12223 | 代理人： | 张耀 |
| 地址： | 300071*** | 国省代码： | 天津;12 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 一种基于多模态数据和美学原理的神经网络生成视频摘要的方法，包括：S100：将原始视频输入到多模态数据提取模块后得到文本模态的字幕数据，音频模态的背景音乐数据和图像模态的视频帧数据，再通过用户输入场景文本数据；S200：将多模态数据再分别输入到多模态特征编码模块中编码，输出各模态数据的特征向量表示序列；S300：将特征向量表示序列输入到重要镜头选择模块，分别提取出原始视频中的亮点镜头、代表性镜头、用户期望镜头和叙事镜头。S400：把亮点镜头、代表性镜头、用户期望镜头和叙事镜头输入到美学镜头组装模块中筛选出遵循美学原理的高质量镜头并拼接成视频摘要。相较于现有方法，提高了生成的视频摘要的可看性和叙述性。 | ||
| 搜索关键词： | 一种 基于 多模态 数据 美学 原理 神经网络 生成 视频 摘要 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于南开大学，未经南开大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110916764.5/，转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
