-
公开(公告)号:CN118605850B
公开(公告)日:2024-11-12
申请号:CN202411075543.X
申请日:2024-08-07
Applicant: 之江实验室
IPC: G06F8/30 , G06F8/41 , G06F16/2455
Abstract: 本发明公开一种面向Triton编译器流水线的优化系统及优化方法,系统包括方言管理器、转换过程管理器、自定义优化过程构造器、优化过程管理器、流水线构造器、优化过程测试器和性能评估器。本发明通过自定义优化过程构造器为用户提供的用于编写转换过程涉及的方言的操作组合的性能优化策略的接口和模板,使得用户能够有针对性地设计优化策略,提升代码运算性能;优化过程管理器允许针对不同GPU架构添加特定的优化pass过程,使得优化系统具有更好的GPU适应性;优化过程测试器确保优化过程的正确执行,性能评估器提供量化评估,使得优化效果可验证。本发明的优化系统能够对方言、转换过程、优化过程进行精细控制,提供了优化系统的管理灵活性和可扩展性。
-
公开(公告)号:CN117170879B
公开(公告)日:2024-03-12
申请号:CN202311437174.X
申请日:2023-11-01
Applicant: 之江实验室
IPC: G06F9/50
Abstract: 本申请涉及一种面向智能芯片的设备管理装置和方法,其中,该装置包括信息采集模块,用于获取设备信息;数据存储模块,分别与设备管理模块、用于存储设备信息、智能芯片加速卡资源调度信息和设置信息;设备设置模块,用于对设备的目标参数进行设置;资源监控模块,用于监控设备的运行情况和智能芯片加速卡资源的使用情况;设备管理模块,用于调度智能芯片加速卡资源。通过本申请,解决了传统的设备管理装置对于智能芯片加速卡资源的利用效率较低问题,提高了加速卡资源的利用效率。
-
公开(公告)号:CN117081931B
公开(公告)日:2024-01-09
申请号:CN202311344093.5
申请日:2023-10-17
Applicant: 之江实验室
IPC: H04L41/0896 , H04L41/0894 , H04L67/1097
Abstract: 本说明书公开了一种异构分布式存储系统在线扩容方法及装置,涉及存储扩容技术领域,方法包括:首先将新增存储节点组织成一个单独的分布式存储集群,注册为存储子集群,然后基于容量分配规则和用户存储需求,控制模块生成预分配结果,接着根据预分配结果,在目标存储子集群分配用户命名空间,最后命名空间模块推送配置到接入网关,接入网关配置生效,根据用户命名空间将IO操作请求分发到对应的存储子集群。本发明打破了软硬件限制,通过接入网关统一对外提供存储服务,解决了对业务的入侵问题,实现了异构存储资源整合并提供统一的存储服务的目的。
-
公开(公告)号:CN116821778B
公开(公告)日:2024-01-09
申请号:CN202311103044.2
申请日:2023-08-30
Applicant: 之江实验室
IPC: G06F18/24 , A61B5/11 , G06N3/0464 , G06N3/0442 , G06N3/084
Abstract: 本申请涉及一种基于WIFI信号的步态识别方法、装置和可读存储介质,其中,基于WIFI信号的步态识别方法包括:通过利用不同环境下采集的训练样本对所述步态特征提取器、环境判别器以及步态识别器进行训练,以使得所述特征提取器提取的所述人体步态特征包含人体步态信息的同时不包含环境信息作为目的,得到训练完成的步态识别模型,通过将所述第一时频图输入至训练完成的步态识别模型,输出所述待测对象所对应的身份信息。解决了相关技术中步态识别模型对环境变化敏感的问题,实现了步态识别模型
-
公开(公告)号:CN117093871A
公开(公告)日:2023-11-21
申请号:CN202311335992.9
申请日:2023-10-16
Applicant: 之江实验室
IPC: G06F18/214 , G06F18/20 , G06N3/0464 , G06N3/08
Abstract: 本申请涉及一种面向深度学习分布式训练测评方法和系统,其中,面向深度学习分布式训练测评方法包括:对各所述分布式神经网络模型分别进行训练,获得对应的第一性能指标;并基于各所述第一性能指标,调整各所述分布式神经网络模型的所述分布式优化算法、所述分布式策略并行度以及所述训练参数,以进行优化训练,得到对应的第二性能指标;基于各所述第二性能指标,确定最优分布式神经网络模型。本发明使用指标量化评估各分布式神经网络模型计算的性能,并基于评估指标进一步进行优化训练,提高了各分布式神经网络模型计算的性能,通过优化后的指标,获得最优分布式神经网络模型,帮助技术人员高效部署分布式神经网络模型。
-
公开(公告)号:CN117032739A
公开(公告)日:2023-11-10
申请号:CN202311285993.7
申请日:2023-10-07
Applicant: 之江实验室
Abstract: 本说明书公开了一种镜像生成的方法、系统、存储介质及电子设备,包括:确定用户选择的生成目标镜像文件所需的基础镜像的环境信息,并展示给用户。再确定基于基础镜像生成目标镜像文件时所需的其他资源的资源信息,并根据资源信息,从资源库中确定生成目标镜像文件时所需的材料文件。根据环境信息和资源信息,采用指定规则,生成目标镜像文件对应的指令文件。根据材料文件及基础镜像,按照指令文件中的指令,自动完成目标镜像的构建。所述系统和方法使得用户无需掌握复杂的镜像构建语法,降低目标镜像构建的技术门槛,并能快速生成符合要求的目标镜像,提高了镜像构建的效率。
-
公开(公告)号:CN116700933A
公开(公告)日:2023-09-05
申请号:CN202310966044.9
申请日:2023-08-02
Applicant: 之江实验室
Abstract: 本申请涉及一种面向异构算力联邦的多集群作业调度系统和方法,所述系统包括:事件感知模块、作业队列管理模块、资源拓扑生成模块和调度决策生成模块;所述资源拓扑生成模块,用于根据所述事件感知模块分配的目标事件生成资源拓扑数据;所述资源拓扑数据包括根据所述目标事件对应的节点信息拓扑生成的多个集群的集群信息;所述调度决策生成模块,用于根据从所述作业队列管理模块中获取的待调度的目标作业和从所述资源拓扑生成模块获取的资源拓扑数据,生成调度结果。本申请通过节点信息到多个集群的集群信息的拓扑,从而实现了多个集群的跨集群资源分配。
-
公开(公告)号:CN115237547B
公开(公告)日:2022-12-06
申请号:CN202211148626.8
申请日:2022-09-21
Applicant: 之江实验室
Abstract: 本发明提供一种非侵入式HPC计算集群的统一容器集群托管系统和方法,所述系统包括:自定义计算作业资源集、计算集群管理模块、计算集群执行模块以及一个或多个需要被纳管的HPC计算集群,所述的计算集群管理模块包括:控制器、配置器、工作负载承载器。当现有环境下存在两类或多类的容器集群管理系统和面向科学计算领域的集群管理和作业调度系统的复杂集群环境下,本专利提供了一种非侵入式方式构建基于容器集群管理系统的统一操作管理平面的系统和方法。
-
公开(公告)号:CN117591625B
公开(公告)日:2024-04-12
申请号:CN202410076461.0
申请日:2024-01-18
Applicant: 之江实验室
Abstract: 本说明书公开了一种数据存储方法、装置、存储介质及电子设备,在此方法中,通过对目标数据源进行周期性数据采集,来得到目标数据源中的非结构化数据,并将根据每个非结构化数据对应的元数据生成该非结构化数据对应的数据标识,进而,使用数据标识作为判断依据对每次采集到的非结构化数据进行筛选,以得到待存储数据,同时对预设的数据标识表进行实时更新,并将每个待存储数据对应的数据标识作为结构化数据的标识,对各待存储数据进行存储。使用数据标识作为判断依据来确定待存储的非结构数据,减少了数据冗余,并将这些待存储的非结构数据转化为结构化数据进行存储,大大提高了非结构化数据的存储效率以及查询效率。
-
公开(公告)号:CN117349401B
公开(公告)日:2024-03-15
申请号:CN202311665185.3
申请日:2023-12-06
Applicant: 之江实验室
IPC: G06F16/31 , G06F16/33 , G06F16/35 , G06F40/205
Abstract: 在本说明书提供的一种非结构化数据的元数据存储方法、装置、介质及设备中,通过响应于第一用户输入的包含非结构化数据的元数据存储请求,对非结构化数据的提取,确定符合预设元数据分类的原始数据。再通过对原始数据的解析,确定原始数据中对应预设元数据分类的结构化元数据。最后将结构化元数据存储在湖仓一体存储平台中,供第二用户检索并管理。使得不同权限的用户能够高效的检索并管理非结构化数据中需要管理的结构化元数据。
-
-
-
-
-
-
-
-
-