-
公开(公告)号:CN110347852A
公开(公告)日:2019-10-18
申请号:CN201910490456.3
申请日:2019-06-06
Applicant: 华中科技大学
IPC: G06F16/51 , G06F16/172
Abstract: 本发明公开了一种嵌入横向扩展键值存储系统的文件系统及文件管理方法,属于信息存储技术领域,文件系统包括:内存层、第一键值存储层以及第二键值存储层;内存层用于缓存外来写入数据,达到预设写入量后将数据写入第一键值存储层;第一键值存储层用于通过第一数据表接收并存储来自内存层的数据,并在第一数据表满时将其中存储的内容写入第二键值存储层;第二键值存储层用于通过第二数据表接收并存储来自第一键值存储层的数据;第一键值存储层还包括二级索引结构,用于记录目录/文件与第一数据表的映射关系,属于同一目录的第一数据表之间键值范围有序。本发明能够显著改善用于存储海量小文件的文件系统所存在的读放大、写放大和空间放大的问题。
-
公开(公告)号:CN109359726A
公开(公告)日:2019-02-19
申请号:CN201811428718.5
申请日:2018-11-27
Applicant: 华中科技大学
Abstract: 本发明公开一种基于winograd算法的卷积神经网络优化方法,包括:(1)确定待优化的卷积神经网络,所述待优化的卷积神经网络包括至少一个卷积层,每个卷积层包括多个过滤器,每个过滤器有多个通道,每个通道对应一个卷积核;(2)在每个卷积层中,根据每个卷积核的绝对值之和进行排序,按比例选取绝对值之和小的卷积核进行裁剪,并更新每个卷积层的面具矩阵;(3)基于所述面具矩阵使用winograd算法确定每个过滤器对应的输出特征图。本发明基于winograd算法在转化卷积核时添加一个面具矩阵来识别已被裁剪的卷积核;使用预设矩阵W、X、M对裁剪的模型进行计算,以此避免局部非结构化带来的计算劣势。
-
公开(公告)号:CN105892947B
公开(公告)日:2019-01-22
申请号:CN201610196315.7
申请日:2016-03-31
Applicant: 华中科技大学
IPC: G06F3/06
Abstract: 本发明公开了一种节能存储系统的SSD与HDD混合缓存管理方法及系统,其方法包括:构建包括SSD缓存与HDD缓存的混合缓存,利用SSD缓存存放最热数据,用HDD缓存存放次热数据;创建基于状态与热度结合的全局访问表;根据全局访问表对用户请求进行分类处理;根据供电状况对主存储池的数据节点进行操作:在面向新能源的节能存储系统的主存储池之上引入由SSD缓存和HDD缓存组成的混合缓存;在供电不足时段,缓存层在处理存储系统的绝大部分请求,在保证数据可用性和存取性能的同时,减少对主存储池的访问次数;并优先淘汰缓存中处于开启状态磁盘的数据,尽可能在HDD缓存中保留关闭磁盘的数据,减少关闭磁盘的被动开启,起到减少磁盘被动开启、降低访问能耗的作用。
-
公开(公告)号:CN105872040B
公开(公告)日:2018-11-30
申请号:CN201610188055.9
申请日:2016-03-30
Applicant: 华中科技大学
IPC: H04L29/08
CPC classification number: Y02D50/10
Abstract: 本发明公开了一种利用网关节点缓存优化分布式块存储写性能的方法,具体包括:缓存经过网关节点的数据,并采用计数表对各数据块的访问次数进行计数;对于用户请求,若为读请求,则在读请求命中缓存时从缓存读取数据,在读请求未命中缓存时从本地节点或者副本节点读取数据;并将该请求访问过的节点计数加一;若为写请求,则先写网关节点的缓存,然后在该写请求对应的其他副本节点上做日志备份,用于掉电恢复;在提高系统性能的同时还保证了数据的可靠性;由于写操作除了写缓存以外只需要根据设定在磁盘上备份日志,不需要根据请求地址在磁盘上进行寻址操作,节省了磁盘的寻址时间,使得分布式块存储系统的写性能得到了提升。
-
公开(公告)号:CN105894114A
公开(公告)日:2016-08-24
申请号:CN201610197318.2
申请日:2016-03-31
Applicant: 华中科技大学
Abstract: 本发明公开了一种基于动态条件玻尔兹曼机的太阳能预测方法,包括如下步骤:获取条件玻尔兹曼机的参数;建立动态条件玻尔兹曼机的模型;对动态条件玻尔兹曼机进行训练,获取训练好的动态条件玻尔兹曼机模型的参数;采用训练好的动态条件玻尔兹曼机参数以及样本向量,经过吉布斯采样获取太阳能预测值;由于所采用的条件波尔兹曼机模型可以有效动态捕捉基于时间序列的数据的变化,因此采用该模型可以学习到太阳能数据的变化规律,具有提高实时预测准确率的效果,另一方面,采样数据挖掘的方法实时获取最相似样本作为输入样本,具有进一步提高实时预测准确度效果。
-
公开(公告)号:CN102999428A
公开(公告)日:2013-03-27
申请号:CN201210429537.0
申请日:2012-11-01
Applicant: 华中科技大学
IPC: G06F12/02
Abstract: 本发明公开了一种瓦记录磁盘的四级编址方法,包括以下步骤:将瓦记录磁盘的逻辑空间划分为“区-段-块-扇区”的四级结构,采用径向编址的方式对划分后的四级结构进行编址,采用对称堆叠式的磁道布局对编址后的四级结构的区间间隔进行优化,对编址后的四级结构的瓦记录磁盘进行读写操作。本发明针对瓦记录磁盘随机写限制,对瓦记录磁盘的数据结构和磁道布局进行优化,并且结合闪存和内存的读写速度快优势,组成三级架构的瓦记录磁盘系统,来解决传统瓦记录磁盘的随机写性能差的问题,使其在倍增磁盘可用容量的同时,避免性能的下降,并提高读写速度。
-
公开(公告)号:CN102184080B
公开(公告)日:2012-10-10
申请号:CN201110111831.2
申请日:2011-04-29
Applicant: 华中科技大学
IPC: G06F3/06
Abstract: 本发明提供了一种基于固化条带的RAID系统扩容后的数据写入方法,该方法首先利用每个磁盘中偏移量最小的空闲数据单元构建新增条带,并对新增条带中的每个数据单元进行局部编号,其次把数据写入新增条带。本发明还提供了数据读取方法,首先确定数据所在数据单元的全局编号;其次由该全局编号确定该数据单元的局部编号S-U;最后通过该局部编号S-U,找到该数据单元读取数据。本发明采用固化条带的方法,使得在磁盘增加时,条带的大小不变,扩容后,每次对RAID的访问不需要访问所有的磁盘,只要针对原始RAID的数据单元进行访问,不受新增磁盘的影响,使得磁盘IO操作数大幅减少,适用于多种RAID级别,具有良好的适应性。
-
公开(公告)号:CN101430657B
公开(公告)日:2011-10-26
申请号:CN200810197659.5
申请日:2008-11-17
Applicant: 华中科技大学
IPC: G06F11/14
Abstract: 本发明公开了一种连续数据保护方法,该方法综合考虑时间和空间代价,通过对所有前后两个版本的写操作数据块进行异或操作。根据读写的局部性原理,异或操作后的数据块其绝大部分数据位值为0。然后再采用压缩算法对该校验值进行压缩,可以极大地节省记录写操作日志的存储空间。其存储空间为原记录方式的1/20~1/30。另外在记录时定期引入快照机制,使得恢复时可先恢复到最近的快照点,然后再恢复到指定的时间点,这样可显著提高数据恢复的效率并解决异或效验数据链太长后可能产生的“污染”问题,提高恢复数据的可靠性。本发明实现了真正意义上数据块级别的连续数据保护,既具有块级高效率恢复的特点,还具有低存储空间开销、低系统性能影响的优点。
-
公开(公告)号:CN101923496A
公开(公告)日:2010-12-22
申请号:CN201010241282.6
申请日:2010-07-30
Applicant: 华中科技大学
IPC: G06F11/10
Abstract: 本发明公开了一种RAID的数据并行重构方法,采用子阵列分布方式实现并行重构操作,子阵列由不同磁盘的区块构成,对于数据盘中的每一个区块,分别同时寻找与其构成同一子阵列的其它区块,依据其它区块的数据对该区块的数据进行重构。本发明成倍地缩短了数据重构过程,其所有重构操作不论是读或者写相关数据都是并行操作,且在重构过程中可以实时响应前台用户的请求,有效降低了用户平均响应时间,在提高系统可靠性的同时,增强了系统的性能。
-
公开(公告)号:CN118860276A
公开(公告)日:2024-10-29
申请号:CN202410819674.8
申请日:2024-06-24
Applicant: 华中科技大学
IPC: G06F3/06 , H04L49/901 , H04L49/90
Abstract: 本申请属于信息存储相关技术领域,其公开了一种分离式键值存储系统及其存储的操控方法、电子设备,操控方法在写数据期间对内存节点进行空间复用,包括:将定位无效Value的Key和vLog指针保存于无效数据映射表;当写入新的键值对时,判断已有Chunk中是否存在可用空间大小满足预期的可用Chunk,若有,则根据无效数据映射表将Value覆盖无用数据;根据无效数据映射表选择具有无效Value的Chunk进行重写,将所选定的Chunk中的有效Value连续地存入新的Chunk,并原地修改SST文件,释放原有Chunk。通过上述方法实现无效数据空间复用,可以避免内存空间的浪费,提高内存空间的利用率。
-
-
-
-
-
-
-
-
-