[发明专利]文件数据处理方法、装置、计算机设备和存储介质在审
| 申请号： | 201910802087.7 | 申请日： | 2019-08-28 |
| 公开（公告）号： | CN110674093A | 公开（公告）日： | 2020-01-10 |
| 发明（设计）人： | 毛伟文 | 申请（专利权）人： | 金蝶汽车网络科技有限公司 |
| 主分类号： | G06F16/172 | 分类号： | G06F16/172 |
| 代理公司： | 44224 广州华进联合专利商标代理有限公司 | 代理人： | 杨欢 |
| 地址： | 518000 广东省深圳市前海深港合作区前*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请提供了一种文件数据处理方法、装置、计算机设备和存储介质。所述方法包括：获取目标文件所对应的当前顺序字节数据；识别所述当前顺序字节数据是否为分隔符；若否，则将所述当前顺序字节数据写入到缓存；若是，则对缓存的字节数据进行对象处理；当获取到下一顺序字节数据时，将所述下一顺序字节数据作为当前顺序字节数据，返回所述识别所述当前顺序字节数据是否为分隔符的步骤，直至所述当前顺序字节数据为结束字节。采用本方法能够提高文件数据的处理效率。 | ||
| 搜索关键词： | 字节数据 缓存 分隔符 文件数据处理 计算机设备 处理效率 存储介质 对象处理 获取目标 文件数据 写入 返回 申请 | ||
【主权项】：
1.一种文件数据处理方法，所述方法包括：/n获取目标文件所对应的当前顺序字节数据；/n识别所述当前顺序字节数据是否为分隔符；/n若否，则将所述当前顺序字节数据写入到缓存；/n若是，则对缓存的字节数据进行对象处理；/n当获取到下一顺序字节数据时，将所述下一顺序字节数据作为当前顺序字节数据，返回所述识别所述当前顺序字节数据是否为分隔符的步骤，直至所述当前顺序字节数据为结束字节。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于金蝶汽车网络科技有限公司，未经金蝶汽车网络科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910802087.7/，转载请声明来源钻瓜专利网。
- 同类专利
- 基于对象存储的数据处理方法、装置、服务器和存储介质-201911030905.2
- 郭军;卢晶晶 - 柏科数据技术(深圳)股份有限公司
- 2019-10-28 - 2020-02-14 - G06F16/172
- 本发明实施例提供了一种基于对象存储的数据处理方法、装置、服务器和存储介质。该基于对象存储的数据处理方法包括：接收客户端上传的第一文件，所述第一文件包括第一文件名；根据所述第一文件名判断是否存在同名文件；如果不存在所述同名文件，则直接保存所述第一文件；如果存在所述同名文件，则基于所述同名文件的历史操作记录对所述第一文件增加版本属性并进行保存。达到了降低集群的负载，优化集群的性能的效果。
- 一种媒体文件缓存方法和媒体播放设备-201410064850.8
- 汪媛 - 腾讯科技(深圳)有限公司
- 2014-02-25 - 2020-02-11 - G06F16/172
- 本发明提供一种媒体文件缓存方法和媒体播放设备，涉及互联网技术领域，为解决用户在无线局域网络环境下没有预先缓存需要观看的视频导致的浪费流量的问题而发明。其方法为：首先，在播放媒体文件时监测用户对媒体文件进行操作触发的操作指令，当监测到操作指令属于预定义的操作指令时，根据当前的网络环境和媒体文件的播放进度判断是否满足缓存媒体文件的条件，当满足缓存媒体文件的条件时向用户显示缓存选择窗口，以便提示用户缓存该媒体文件，而后接收用户通过缓存选择窗口触发的缓存媒体文件的缓存指令，最后执行缓存指令将媒体文件进行缓存。本实施例用于缓存媒体文件。
- 一种文件读取方法及系统-201610820869.X
- 臧琦 - 苏州浪潮智能科技有限公司
- 2016-09-13 - 2020-02-07 - G06F16/172
- 本发明公开了一种文件读取方法及系统。该方法应用于客户端，包括以下步骤：接收用户针对目标文件的读取请求；确定本地是否保存有目标文件对应的缓存数据；如果是，则直接输出本地保存的目标文件对应的缓存数据；如果否，则将读取请求发送给服务器，以使服务器根据读取请求，返回目标文件对应的缓存数据；接收服务器返回的目标文件对应的缓存数据；在本地保存并输出目标文件对应的缓存数据。应用本发明实施例所提供的技术方案，可以避免出现因客户端与服务器的交互延迟而导致客户端对用户的读取请求响应时间长的问题，提高了响应速度。
- 一种大文件读取优化方法、装置、设备及存储介质-201910819221.4
- 左聪越 - 苏州浪潮智能科技有限公司
- 2019-08-31 - 2020-02-04 - G06F16/172
- 本发明提供一种大文件读取优化方法、装置、设备及存储介质，包括缓存器创建模块、缓存器读取模块、文件请求处理模块；缓存器创建模块，用于创建文件读取时的缓存器；缓存器读取模块，用于读取文件到缓存器；文件请求处理模块，用于发起读取文件请求时通过缓存器进行数据流转。所述的缓存器创建模块包括数据结构定义单元和设置单元；数据结构定义单元，用于定义缓存器数据结构；设置单元，用于设置缓存大小字段。优化不同文件大小上缓存容器大小和文件大小的关系。节约文件读取时间，提高文件的读取效率。
- 数据对象标识生成方法、装置、计算机设备和存储介质-201910878201.4
- 陈方圆;范敏杰;汤昆舟 - 苏宁云计算有限公司
- 2019-09-17 - 2020-02-04 - G06F16/172
- 本申请涉及一种数据对象标识生成方法、装置、计算机设备和存储介质。所述方法包括：确定当前时间戳，当前时间戳为当前时间的日期格式串；根据当前时间戳获取当前时间戳对应的当前序列值，当前序列值为更新当前时间戳对应的序列值得到的数值；根据当前时间戳和当前序列值，为分布式系统中的数据标识对象生成识别标识。采用本方法能够节约存储空间。
- 一种证券文件处理方法及装置-201410594392.9
- 蒋玉树;吴磊;陈德栋;王振骞;范钟艺;葛亮;罗海南;彭建恩 - 中国建设银行股份有限公司
- 2014-10-29 - 2020-01-21 - G06F16/172
- 本发明实施例提供了一种证券文件处理方法及装置，其中的方法可包括：解析证券文件，将解析得到的文件属性信息存储在所述证券文件的数据库属性表中；根据数据库配置表中预设的文件属性信息和业务信息之间的映射关系，查找所述证券文件的文件属性信息对应的目标业务信息，存储在所述证券文件的数据库业务表中；根据所述数据库配置表中预设的业务信息和拆分流程之间的映射关系，查找所述目标业务信息对应的目标拆分流程；执行所述目标拆分流程，从所述证券文件的数据库属性表和/或所述证券文件的数据库业务表中获得用以对所述证券文件进行业务处理的至少一个拆分结果字段。通过本发明可以效率高、差错率低地处理证券文件。
- 一种重命名方法、访问方法及装置-201610852820.2
- 章鹏 - 华为技术有限公司
- 2016-09-26 - 2020-01-17 - G06F16/172
- 一种重命名方法、访问方法及装置，涉及计算机技术领域，减少了IO次数，提高了重命名的效率。该方法应用于对象存储系统中的服务器，包括：接收客户端设备发送的重命名请求，重命名请求携带第一信息、第二信息以及重命名标识，重命名标识用于指示将第一信息替换为第二信息；服务器在检测到重命名标识后，从映射关系表中获取包括第一信息的目标对象名，映射关系表包括目标对象名与目标对象的特征的对应关系，目标对象的特征包括目标对象的通用唯一识别码UUID，目标对象的UUID用于指示目标对象的元数据和数据的存储地址；服务器将目标对象名中的第一信息替换为第二信息。
- 组装基础数据缓存的方法及装置-201510219204.9
- 黄利祥;王维 - 菜鸟智能物流控股有限公司
- 2015-04-30 - 2020-01-14 - G06F16/172
- 本申请公开了组装基础数据缓存的方法及装置，其中，业务服务器预先从推送中心服务器订阅多份基础数据，业务服务器接收到推送中心服务器推送的基础数据以及调用预置回调函数的触发请求时，调用所述回调函数，所述方法包括：通过所述回调函数将接收到的基础数据暂存在本地存储中；判断是否已经将订阅的各份基础数据全部接收到；如果是，则根据所述本地存储中暂存的各份基础数据，按照预置的组装策略进行缓存组装。通过该方法，可以解决数据库服务器的瞬间压力过大的问题，以及，防止业务服务器因基础数据间存在依赖关系，导致的组装任务挂起，或强制访问数据库服务器等问题，具有更强的适应性和实用性。
- 文件数据处理方法、装置、计算机设备和存储介质-201910802087.7
- 毛伟文 - 金蝶汽车网络科技有限公司
- 2019-08-28 - 2020-01-10 - G06F16/172
- 本申请提供了一种文件数据处理方法、装置、计算机设备和存储介质。所述方法包括：获取目标文件所对应的当前顺序字节数据；识别所述当前顺序字节数据是否为分隔符；若否，则将所述当前顺序字节数据写入到缓存；若是，则对缓存的字节数据进行对象处理；当获取到下一顺序字节数据时，将所述下一顺序字节数据作为当前顺序字节数据，返回所述识别所述当前顺序字节数据是否为分隔符的步骤，直至所述当前顺序字节数据为结束字节。采用本方法能够提高文件数据的处理效率。
- 一种键值数据库内布隆过滤器的配置方法-201711042747.3
- 李永坤;张月明;张伟韬;吕敏;许胤龙 - 中国科学技术大学
- 2017-11-17 - 2020-01-03 - G06F16/172
- 本发明公开了一种键值数据库内布隆过滤器配置方法，特征是包括布隆过滤器相关参数设置步骤，生成适应性布隆过滤器步骤，多级缓存队列初始化步骤，多级缓存队列参数调整策略设置步骤，查询策略调整步骤；本发明能够根据工作负载的特征，动态调整布隆过滤器的配置情况；本发明与传统方法相比，在进行查询操作时，对于访问频率较高的文件元数据来说，进行查询判断时，多个布隆过滤器同时进行判断，从而减少了布隆过滤器误报带来的硬盘输入/输出操作；对于访问频率较低的元数据来说，其对应的布隆过滤器个数较少，相应的内存资源占用相对于传统技术也就越低；降低了内存开销，提高了读性能，系统整体的吞吐量得到提升。
- 图像的存储方法和装置-201910865584.1
- 刘隽哲;宣善明 - 大唐网络有限公司
- 2019-09-09 - 2019-12-27 - G06F16/172
- 本发明公开了一种图像的存储方法和装置。其中，该方法包括：获取用于对待存储图像进行压缩的目标采样率，其中，待存储图像通过预设应用程序获取；根据目标采样率对待存储图像进行压缩处理，得到压缩后的图像；将压缩后的图像存储至设备的目标缓存中，其中，目标缓存为预设应用程序对应的缓存区域。本发明解决了现有技术中智能终端的存储空间有限导致难以存储超大图片的技术问题。
- 一种多实例文件处理方法及终端-201910774235.9
- 刘德建;李上杰;方振华;郭玉湖 - 福建天泉教育科技有限公司
- 2019-08-21 - 2019-12-20 - G06F16/172
- 本发明公开了一种多实例文件处理方法及终端，获取第一文件下载请求，第一文件下载请求包括已转码文件ID和实例ID；判断实例ID是否为本机ID，若是，则根据已转码文件ID和实例ID从本机中的实例缓存下载并返回已转码第一文件，否则根据已转码文件ID和实例ID向其他主机中的实例缓存中读取已转码第一文件，并返回已转码第一文件。本发明直接存储在实例缓存中，无需CS服务器，故而减少了缓存服务的硬件成本开销；同时，文件调度是两个实例间的调度，而实例间的访问速度，远远大于引入一台新的CS文件服务器，故而减少文件读取时间；对于用户来说，由于始终是访问一个主机，从而能提高客户端和主机之间的数据传输性能。
- 文献元数据的并行下载方法及装置-201510133983.0
- 裴韬;宋辞;董承玮 - 中国科学院地理科学与资源研究所
- 2015-03-25 - 2019-12-17 - G06F16/172
- 本发明公开一种面向WebScience数据库的文献元数据的并行下载方法及装置，能够解决现有技术耗时耗力和容易出错的问题。所述方法包括：自动建立用于文献元数据下载的多个会话；解析用户输入的检索式，获取所述检索式对应的检索请求信息，通过将所述检索式对应的检索请求信息发送给服务器，获取所述服务器返回的检索id和所述检索id下的文献的文献编号；根据任务量，自动为各个会话分配所述检索id下的文献的文献编号；通过所述各个会话并行下载所述用户输入的检索式所对应的文献元数据。
- 一种卡口图片元数据并发写入、读取方法-201910837651.9
- 彭茂 - 重庆紫光华山智安科技有限公司
- 2019-09-05 - 2019-12-10 - G06F16/172
- 本发明公开了一种卡口图片元数据并发写入、读取方法，其中写入方法包括：当接收到图片索引信息的写入请求时，在内存或数据库中获取未写满的小文件分片节点；其中，所述小文件分片节点由大文件经分片处理得到；将所述图片索引信息写入到所述未写满的小文件分片节点的缓存中；将存储有图片索引信息的小文件分片节点的缓存信息写入磁盘。本发明将大文件分成小文件分片节点的形式组织和管理，能够有效的提升元数据文件的并发读写性能，并且能够减少底层文件系统文件树的个数，增加查找效率。
- 一种用于核电站的历史存储方法-201610143075.4
- 胡俊;江国进;白涛;马建新;傅春霞;宁祾;孙永滨;彭立;毛培霖 - 北京广利核系统工程有限公司;中国广核集团有限公司
- 2016-03-14 - 2019-12-06 - G06F16/172
- 本发明提供一种用于核电站的历史存储方法，历史库主要分为记录点数据、管理数据、工业过程数据，其中，记录点数据用于记录历史库点的配置元数据，包括点的记录周期、存储点项、点项类型；管理数据用于记录历史库点实时数据归档文件信息、记录数据存储方式，管理数据辅助数据检索操作；工业过程数据是历史库点的实时数据归档文件，历史库点按照每个点采集周期存储点实时数据。
- 一种漏洞扫描数据的存储方法及装置-201910812673.X
- 曹浪 - 杭州迪普科技股份有限公司
- 2019-08-30 - 2019-12-03 - G06F16/172
- 本申请提供一种漏洞扫描数据的存储方法，应用于网络设备，所述网络设备包括用于存储漏洞扫描数据的关系型数据库；所述方法包括：周期性确定所述关系型数据库中存储的漏洞扫描数据是否为高频访问数据；如果不是，则将该漏洞扫描数据写入数据文件，并将该漏洞扫描数据从所述关系型数据库中删除；其中，所述关系型数据库与所述数据文件的数据存储路径不同。
- 一种快速烧录数据至EXT分区的方法和装置-201710074013.7
- 刘翊 - 福州瑞芯微电子股份有限公司
- 2017-02-10 - 2019-11-22 - G06F16/172
- 本发明提供了一种快速烧录数据至EXT分区的方法和装置，所述方法以EXT分区的实际大小生成对应的镜像文件，在进行烧录时，先对全区做块擦除处理，对于数据块中存储有数据的块组而言，依然将整个块组烧录；对于数据块中没有存储数据但满足第一预设条件的块组而言，只烧录该块组的超级块和块组描述符；对于数据块中没有存储数据且不满足第一预设条件的块组而言，则不烧录该块组。相较于将整个镜像文件烧录的方式(即将每一块组都逐一烧录)，本方案大大减少了烧录的数据量，同时在第一次启动时也无需对分区进行Resize操作，有利于提高烧录效率。
- 一种数据预取方法、装置、终端及存储介质-201910662766.9
- 葛凯凯 - 腾讯科技(深圳)有限公司
- 2019-07-22 - 2019-11-19 - G06F16/172
- 本申请提供了一种数据预取方法、装置、终端及存储介质，该方法包括：响应目标数据的第一读取请求，第一读取请求包括读取属性信息；基于读取属性信息以及本地缓存中存储的对象文件的属性信息，确定目标数据所在的目标对象和目标条带单元；若在目标条带单元中未查找到目标数据，则将目标条带单元的存储容量确定为与目标数据对应的预取范围；基于目标对象的属性信息，确定与目标对象对应的目标服务器；向目标服务器发送读取预取范围内的数据的第二读取请求，以使目标服务器对预取范围内的数据进行读取，得到预取数据；接收目标服务器发送的预取数据。本申请能够提高缓存命中率，减少网络延迟，提高分布式文件系统的数据读访问性能。
- 专利分类
