公开(公告)号：CN105677904B

公开(公告)日：2019-07-12

申请号：CN201610082148.3

申请日：2016-02-04

申请人： 杭州数梦工场科技有限公司

发明人： 张亚惠

IPC分类号： G06F16/182 ,  G06F16/31

摘要： 本申请提供一种基于分布式文件系统的小文件存储方法及装置，所述方法包括：为存在关联性的待存储小文件分配唯一对应的数据分表；所述数据分表为预设的逻辑二维表，包括由预设大小的逻辑存储单元构成的若干逻辑行和逻辑列；所述待存储文件包括文件类型和大小均不相同的批量小文件；将所述待存储小文件中存在关联性的小文件分别存储至所述数据分表中的同一逻辑行或者同一逻辑列；针对所述存在关联性的小文件分别生成唯一对应的文件索引，并将该文件索引保存至对应的逻辑行或者逻辑列中。本申请可以显著降低分布式文件系统的文件存储压力。

公开(公告)号：CN105677904A

公开(公告)日：2016-06-15

申请号：CN201610082148.3

申请日：2016-02-04

申请人： 杭州数梦工场科技有限公司

发明人： 张亚惠

IPC分类号： G06F17/30

CPC分类号： G06F16/316 ,  G06F16/182

摘要： 本申请提供一种基于分布式文件系统的小文件存储方法及装置，所述方法包括：为存在关联性的待存储小文件分配唯一对应的数据分表；所述数据分表为预设的逻辑二维表，包括由预设大小的逻辑存储单元构成的若干逻辑行和逻辑列；所述待存储文件包括文件类型和大小均不相同的批量小文件；将所述待存储小文件中存在关联性的小文件分别存储至所述数据分表中的同一逻辑行或者同一逻辑列；针对所述存在关联性的小文件分别生成唯一对应的文件索引，并将该文件索引保存至对应的逻辑行或者逻辑列中。本申请可以显著降低分布式文件系统的文件存储压力。