-
公开(公告)号:CN110636103B
公开(公告)日:2021-06-04
申请号:CN201910663907.9
申请日:2019-07-22
申请人: 中山大学
摘要: 一种多异构集群作业统一调度方法,包括:S1、在多个集群上部署作业代理服务,作业代理服务统一不同作业调度系统的输入输出数据格式,提供统一数据接口视图;S2、在集群上层部署作业服务网关,其汇总管理多个作业代理服务,统一管理多个集群;S3、用户获得作业代理服务授权,并通过作业代理服务实现对集群的统一访问;S4、用户提交作业,作业服务网关按规则分配作业至特定集群,作业文件通过作业代理服务在本地和集群间或集群和集群间传输;S5、作业代理服务将请求转为集群内作业调度系统的命令执行,将结果转为统一的作业管理信息返回。实现了在多异构集群上的作业统一调度,简化了多异构集群作业调度的操作,充分利用了计算资源。
-
公开(公告)号:CN112231052A
公开(公告)日:2021-01-15
申请号:CN202011046105.2
申请日:2020-09-29
申请人: 中山大学
摘要: 本发明公开了一种高性能分布式容器镜像分发系统及方法,该系统包括:主仓库模块、调度模块和节点处理模块。该方法包括:主仓库模块转发镜像拉取请求;调度模块分析得到待拉取文件清单并发送数据至节点处理模块;节点处理模块获取惊险分层文件并通过IB网络传输文件。通过使用本发明,减少容器镜像服务器的服务压力。本发明作为一种高性能分布式容器镜像分发系统及方法,可广泛应用于容器云计算领域。
-
公开(公告)号:CN110149235B
公开(公告)日:2020-11-24
申请号:CN201910452968.0
申请日:2019-05-28
申请人: 中山大学
摘要: 本发明公开了一种支持多用户和多网络协议、可动态扩展的树状网络代理系统,具体包括:根节点、若干中间节点、若干叶子节点,所述根节点所在的入口主机部署有用户身份认证模块、网络代理服务模块,所述中间节点和叶子节点均部署有网络代理服务模块,所述根节点所在的入口主机和所述中间节点所在的中转主机之间部署有数据库记录模块。本发明通过部署用户身份认证模块、数据库记录模块,并根据数据中心的网络实际情况灵活部署和配置网络代理服务模块以形成树状网络代理系统,在不改变数据中心现有网络架构的情况下为用户访问数据中心的内部服务提供统一的入口,并提供多用户访问的灵活性和安全性,减少数据中心的网络建设成本。
-
公开(公告)号:CN110505300A
公开(公告)日:2019-11-26
申请号:CN201910787610.3
申请日:2019-08-23
申请人: 中山大学
摘要: 本发明属于计算机网络领域,更具体地,涉及一种IP网络与命名数据网络混合的新型链式代理方法,包括:步骤S1:建立第一网络;所述第一网络为命名数据网络;步骤S2:第一网络实现链式代理;步骤S3:建立第二网络,第一网络与第二网络进行数据交互;所述第二网络为命名数据网络或TCP/IP网络,若第二网络为TCP/IP网络时,第一网络与第二网络之间具有中间件,用于对数据包进行转换。本发明中间件的设立使TCP/IP网络与命名数据网络能进行信息交互,实现将命名数据网络运用于链式代理之中。
-
公开(公告)号:CN110442575A
公开(公告)日:2019-11-12
申请号:CN201910586490.0
申请日:2019-07-01
申请人: 中山大学
IPC分类号: G06F16/22 , G06F16/23 , G06F16/2455
摘要: 本发明涉及一种面向科学大数据的索引生成方法和检索方法,包括以下步骤:根据各个数据块的热度确定其中若干个数据块为热点数据块;根据热点数据块的连续情况将热点数据块和与该热点数据块邻近的数据块进行合并;根据合并后的数据块生成数据索引或更新原有的数据索引。本发明既可以防止数据块太大而导致检索时过多冗余信息进入磁盘而增加数据过滤的开销,又可以防止数据块太小而导致检索时增加磁盘访存的开销,更加充分利用计算机的计算资源,大大提高了科学大数据的检索效率。
-
公开(公告)号:CN112231052B
公开(公告)日:2024-06-18
申请号:CN202011046105.2
申请日:2020-09-29
申请人: 中山大学
摘要: 本发明公开了一种高性能分布式容器镜像分发系统及方法,该系统包括:主仓库模块、调度模块和节点处理模块。该方法包括:主仓库模块转发镜像拉取请求;调度模块分析得到待拉取文件清单并发送数据至节点处理模块;节点处理模块获取惊险分层文件并通过IB网络传输文件。通过使用本发明,减少容器镜像服务器的服务压力。本发明作为一种高性能分布式容器镜像分发系统及方法,可广泛应用于容器云计算领域。
-
公开(公告)号:CN110149235A
公开(公告)日:2019-08-20
申请号:CN201910452968.0
申请日:2019-05-28
申请人: 中山大学
摘要: 本发明公开了一种支持多用户和多网络协议、可动态扩展的树状网络代理系统,具体包括:根节点、若干中间节点、若干叶子节点,所述根节点所在的入口主机部署有用户身份认证模块、网络代理服务模块,所述中间节点和叶子节点均部署有网络代理服务模块,所述根节点所在的入口主机和所述中间节点所在的中转主机之间部署有数据库记录模块。本发明通过部署用户身份认证模块、数据库记录模块,并根据数据中心的网络实际情况灵活部署和配置网络代理服务模块以形成树状网络代理系统,在不改变数据中心现有网络架构的情况下为用户访问数据中心的内部服务提供统一的入口,并提供多用户访问的灵活性和安全性,减少数据中心的网络建设成本。
-
公开(公告)号:CN110442575B
公开(公告)日:2023-07-18
申请号:CN201910586490.0
申请日:2019-07-01
申请人: 中山大学
IPC分类号: G06F16/22 , G06F16/23 , G06F16/2455
摘要: 本发明涉及一种面向科学大数据的索引生成方法和检索方法,包括以下步骤:根据各个数据块的热度确定其中若干个数据块为热点数据块;根据热点数据块的连续情况将热点数据块和与该热点数据块邻近的数据块进行合并;根据合并后的数据块生成数据索引或更新原有的数据索引。本发明既可以防止数据块太大而导致检索时过多冗余信息进入磁盘而增加数据过滤的开销,又可以防止数据块太小而导致检索时增加磁盘访存的开销,更加充分利用计算机的计算资源,大大提高了科学大数据的检索效率。
-
公开(公告)号:CN110636103A
公开(公告)日:2019-12-31
申请号:CN201910663907.9
申请日:2019-07-22
申请人: 中山大学
摘要: 一种多异构集群作业统一调度方法,包括:S1、在多个集群上部署作业代理服务,作业代理服务统一不同作业调度系统的输入输出数据格式,提供统一数据接口视图;S2、在集群上层部署作业服务网关,其汇总管理多个作业代理服务,统一管理多个集群;S3、用户获得作业代理服务授权,并通过作业代理服务实现对集群的统一访问;S4、用户提交作业,作业服务网关按规则分配作业至特定集群,作业文件通过作业代理服务在本地和集群间或集群和集群间传输;S5、作业代理服务将请求转为集群内作业调度系统的命令执行,将结果转为统一的作业管理信息返回。实现了在多异构集群上的作业统一调度,简化了多异构集群作业调度的操作,充分利用了计算资源。
-
-
-
-
-
-
-
-