Invention Publication
- Patent Title: 数据处理方法、装置、电子设备及可读存储介质
-
Application No.: CN202210287639.7Application Date: 2022-03-22
-
Publication No.: CN114691681APublication Date: 2022-07-01
- Inventor: 韦万 , 黄俊深 , 周嘉祺
- Applicant: 平凯星辰(北京)科技有限公司
- Applicant Address: 北京市海淀区西小口路66号中关村东升科技园·北领地C-1楼2层207
- Assignee: 平凯星辰(北京)科技有限公司
- Current Assignee: 平凯星辰(北京)科技有限公司
- Current Assignee Address: 北京市海淀区西小口路66号中关村东升科技园·北领地C-1楼2层207
- Agency: 北京市立方律师事务所
- Agent 张筱宁
- Main IPC: G06F16/22
- IPC: G06F16/22 ; G06F16/2455 ; G06F3/06

Abstract:
本申请实施例提供了一种数据处理方法、装置、电子设备及计算机可读存储介质,涉及数据存储技术领域。该方法包括:获取数据存储请求,数据存储请求中包括待存储的数据,将待存储的数据以列数组的形式缓存至内存中;当内存中缓存的数据达到预设大小时,对缓存的数据进行压缩获得数据块;从空间管理文件中搜索各数据文件的空闲存储空间,并结合数据块的大小,从各数据文件中确定用于存储数据块的目标数据文件以及数据块在目标数据文件的存储位置;将数据块移动至存储位置进行存储。本申请实施例避免了列式存储系统在频繁更新的状态下产生过多写IO,以及避免产生大量的小文件。
Public/Granted literature
- CN114691681B 数据处理方法、装置、电子设备及可读存储介质 Public/Granted day:2025-04-25
Information query