一种图片的处理方法及相关设备
    1.
    发明公开

    公开(公告)号:CN116800877A

    公开(公告)日:2023-09-22

    申请号:CN202210264533.5

    申请日:2022-03-17

    摘要: 本申请实施例公开了一种图片的处理方法及计算机设备,可应用于计算机文件管理领域,具体可应用于图片文件压缩场景,包括:将第一图片文件编码为所需存储空间更小的第二图片文件,根据第一图片文件的文件名和格式生成伪文件,并建立该伪文件与编码得到的第二图片文件之间的对应关系,以使得系统能够通过该伪文件定位到该第二图片文件,用伪文件和第二图片文件替代第一图片文件,并存储于存储器中。该方法能够在保证生态兼容性的同时,减小图片的存储空间,并做到应用和用户无感。

    数据写入方法及相关设备
    2.
    发明公开

    公开(公告)号:CN118625994A

    公开(公告)日:2024-09-10

    申请号:CN202310246012.1

    申请日:2023-03-07

    IPC分类号: G06F3/06 G06F16/215 G06N20/00

    摘要: 本申请提供了一种数据写入方法及相关设备,涉及计算机技术领域。数据写入方法包括:响应于第一数据的写入请求,获取第一数据的数据特征;基于第一数据的数据特征,确定第一数据所属的数据类型,数据类型包括第一类型与第二类型;基于指纹表记录的指纹确定第一数据的写入方式,及按照确定的写入方式执行第一数据的写入,指纹表中的指纹用于唯一标识数据;基于第一数据的数据类型将第一数据的指纹记录至指纹表。本申请可实现重复数据删除,节省磁盘的存储空间,且可降低指纹表的数据量,提升重复数据删除效率。

    一种文件去重方法、装置和设备
    3.
    发明公开

    公开(公告)号:CN118120212A

    公开(公告)日:2024-05-31

    申请号:CN202180103614.0

    申请日:2021-10-28

    IPC分类号: H04L67/06

    摘要: 本申请实施例提供一种文件去重方法、装置和设备,该方法在文件写入过程中,响应于写请求,暂存写请求中的文件在第一存储空间中,并将写请求中的文件与第二存储空间中的文件进行对比,从而判断写请求中的文件是否为重复文件。通过该方法,能够实现在文件写入过程中自动去除重复文件,减少存储空间占用;用户无需主动发起文件去重请求,降低性能开销。

    一种分布式协同去重方法及系统
    4.
    发明公开

    公开(公告)号:CN116991811A

    公开(公告)日:2023-11-03

    申请号:CN202310969576.8

    申请日:2023-08-02

    摘要: 本发明公开了一种分布式协同去重方法及系统,属于计算机存储管理技术,客户端执行步骤包括:S101:扫描分布式文件系统目录下所有文件并获取各个文件的路径信息、指纹信息和设备地址信息;S102:将各个文件的路径信息、指纹信息和设备地址信息发送给服务器端;S103:接收服务器端反馈的重删表,并删除对应的重复文件;服务器端执行步骤包括:S201:接收各个文件的路径信息、指纹信息和设备地址信息;S202:执行重复指纹查找工作;S203:将重删表发送给客户端。其效果是:能够对分布式下的所有设备进行去重,并通过软软链与硬链接结合的方式规避了因源文件发生改变而导致去重失效的情况,去重率高,一致性强。

    一种基于小波变换的频谱感知模型量化方法

    公开(公告)号:CN118074830A

    公开(公告)日:2024-05-24

    申请号:CN202410205816.1

    申请日:2024-02-26

    申请人: 重庆大学

    发明人: 陈咸彰 许国超

    摘要: 本发明涉及无线通信技术领域,具体公开了一种基于小波变换的频谱感知模型量化方法,针对传统的二值量化策略对某一层的权重全部进行二值量化以及大多在空间域中进行量化,带来模型精度下降的问题,利用小波变换处理分析频谱感知模型中的特征图高频分量,进行了小波能量和相似度的计算,并最终计算出卷积核重要性得分,能够更有效地衡量频谱感知模型中卷积核的重要性。并且对不同重要性的参数进行差异化操作,采用累计能量分析指导不同卷积层中量化权重的比例,保留重要的卷积核精度,量化非重要的卷积核,在减少频谱感知模型在设备上的计算、存储开销的同时,较大程度地保持模型的精度。

    数据处理方法、装置、设备及存储介质

    公开(公告)号:CN113687975B

    公开(公告)日:2023-08-29

    申请号:CN202110794110.X

    申请日:2021-07-14

    申请人: 重庆大学

    IPC分类号: G06F11/10

    摘要: 本发明公开一种数据处理方法,通过将原始数据均分成若干数据块并对所述数据块分组;采用Clay码对组内数据块编码,得到局部校验块;采用RS码对所有数据块编码,得到全局校验块;检测损毁数据块的数量;当检测到只有一个所述损毁数据块时,根据所述损毁数据块所在组的其他数据块和所述损毁数据块所在组的局部校验块,修复所述损毁数据块;当检测到至少两个所述损毁数据块时,根据除损毁数据块所在组外的其他数据块及所述全局校验块,修复所述损毁数据块。本发明还公开了数据处理装置、设备及存储介质,能够通过设计新的编码,组内采用Clay码进行编码,组间采用RS码进行编码,以在修复一个数据块时降低下载的数据量,在修复多个数据块时降低计算开销。

    基于半异步的联邦学习方法、系统、服务器及介质

    公开(公告)号:CN113516249B

    公开(公告)日:2023-04-07

    申请号:CN202110681063.8

    申请日:2021-06-18

    申请人: 重庆大学

    摘要: 本发明公开了一种基于半异步的联邦学习方法,其在中央服务器上根据每一个客户端的的本地模型更新方向和更新时间对所述客户端进行分组,得到多个客户端组,并创建多个以客户端组为单位的调度进程,以使得所述调度进程在每个通信轮中初始化所属组的组模型版本号,并在每个通信轮中根据客户端的本地模型的版本号与组模型版本号计算版本号之差,以用来衡量客户端的本地模型的过时程度,进而使得所述客户端根据版本号之差与预设模型过时阈值的比较结果选择同步更新或异步更新的方式更新本地模型,其能有效解决客户端的掉队效应,并能解决客户端的模型过时问题,进而提升模型的精确度。

    一种重复数据删除的元数据管理方法

    公开(公告)号:CN115098481A

    公开(公告)日:2022-09-23

    申请号:CN202210737553.X

    申请日:2022-06-27

    申请人: 重庆大学

    IPC分类号: G06F16/215

    摘要: 本申请涉及一种重复数据删除的元数据管理方法,接收I/O的请求,将数据切割成数据块,利用哈希算法建立唯一指纹;在指纹索引结构中,对数据块的指纹进行查询;以位图形式创建事务条目,元数据管理器扫描位图,获取处于自由状态的事务条目,分配全局唯一Trans‑i d;若接收到命中指纹索引的请求,则将上层访问的逻辑块号映射为指纹映射中的物理块号,引用计数加1;如果没有命中指纹索引的请求,则分配新的空闲物理块号,建立一个逻辑块号映射,将映射表和引用计数写入到PM的元数据区,对写入的数据块进行存储。本申请中引入与日志机制相结合的事务条目,确保事务条目内的原子性,保证崩溃时一致性的重复数据删除的元数据。

    一种基于FPGA的ORB_SLAM重定位特征点检索加速方法

    公开(公告)号:CN113536024B

    公开(公告)日:2022-09-09

    申请号:CN202110918561.X

    申请日:2021-08-11

    申请人: 重庆大学

    摘要: 本发明提出了一种基于FPGA的ORB_SLAM重定位特征点检索加速方法,包括:S1,将输入的图片缓冲,提取描述子;S2,然后进入工作空间Workspace,通过计算电路对结点的距离求解;S3,每个计算电路的结果会一起流向一个并行比较电路,求出最小值所在的点;S4,最后再判断是否是底层,若是则搜索结束,得出最终结点;S5,每个结点会有一个偏移值,用于寻找求子结点的地址,从而获得关键帧,然后根据关键帧集合进行重新定位。本发明对于电路资源的消耗情况,在计数器前加上近似单元AU形成累计并行计数器APC的电路结构,基于近似计算的原理,在bit流比较长并且需要复制多个相同结构的情况下可以减少硬件资源的消耗,并且提高电路计算速度。

    一种数据容错方法及分布式存储系统

    公开(公告)号:CN114896098A

    公开(公告)日:2022-08-12

    申请号:CN202210464602.7

    申请日:2022-04-29

    申请人: 重庆大学

    IPC分类号: G06F11/08 G06F11/07 G06F3/06

    摘要: 本发明公开了一种数据容错方法和分布式存储系统,其通过将文件经编码容错技术获得的多个原始数据块分发到对应的数据节点上,相比于现有的采用传统冗余机制对生成的原始数据块立即生成三副本的方法,本发明能减少文件初始上传时的网络传输压力,对数据的写放大问题有很好的优化效果;在数据节点随着文件操作过程中生成潜在副本时,向管理节点询问是否保留生成的潜在副本,并由管理节点设置的文件生命周期管理策略,对相应的潜在副本进行销毁。本发明的潜在副本随着系统的常规操作产生,只需要向管理节点询问是否保留副本资源,几乎不额外消耗网络带宽资源,从而能够在保证数据修复性能的同时,减少系统的存储开销。