-
公开(公告)号:CN112131099B
公开(公告)日:2023-07-14
申请号:CN202010806392.6
申请日:2020-08-12
申请人: 新华三大数据技术有限公司
发明人: 黄显晔
摘要: 本申请涉及超融合技术领域,特别涉及一种版本升级测试方法及装置。该方法包括:接收测试终端发送的携带有目标升级策略项的指令,并基于目标升级策略项挂载目标版本的系统安装文件,完成目标版本的系统安装,其中,测试终端存储有若干历史版本的系统安装文件,以及包括每一历史版本对应的升级策略项的升级策略配置文件;接收测集群初始化指令,完成集群初始化,并接收测试终端发送的业务部署配置文件,及基于业务部署配置文件进行业务部署;接收测试终端发送的升级指令,并基于升级指令获取对应的升级包,并基于升级包进行版本升级处理,记录升级测试结果;在确定针对各升级策略项均执行完以上测试操作时,确定测试完成,生成对应的升级测试结果。
-
公开(公告)号:CN116346929A
公开(公告)日:2023-06-27
申请号:CN202310107133.8
申请日:2023-02-13
申请人: 新华三大数据技术有限公司
发明人: 郭恒
IPC分类号: H04L67/60 , H04L67/01 , H04L67/1097 , G06F9/52
摘要: 本申请提供了一种分布式数据计算框架作业提交方法、装置和设备,用于解决分布式系统中如何高效提交分布式数据计算框架作业的技术问题。本申请通过作业数据库记录作业信息,由一个或多个节点上的作业提交客户端从作业数据库中读取满足状态及队列条件的作业提交到分布式资源管理器上进行调度运行。本申请技术方案在节点或网络故障导致作业提交失败的情况下,可通过故障恢复处理过程进行作业的自动恢复;可根据作业提交客户端所在节点的资源和负载情况动态调整作业提交能力,提高作业提交的自适应性和负载均衡性;可实现通过多个节点上的多个作业提交客户端并行提交作业,提高作业提交效率。
-
公开(公告)号:CN113726649B
公开(公告)日:2023-06-13
申请号:CN202111044332.6
申请日:2021-09-07
申请人: 新华三大数据技术有限公司
发明人: 卢子恒
IPC分类号: H04L45/243
摘要: 本发明公开了一种路由信息处理方法及系统,其中,所述方法包括:在检测到虚拟路由组中的设备发生主从切换后,针对从主设备切换为从设备的目标设备设置定时信息;所述定时信息在指定时长之后自动失效;当检测到所述虚拟路由组中所述目标设备再次切换为主设备时,接收所述目标设备上报的路由信息,并判断本地是否存在所述目标设备对应的有效定时信息;若判定存在所述目标设备对应的有效定时信息,则忽略所述目标设备此次上报的所述路由信息。本发明提供的技术方案,能够提高整体系统的稳定性。
-
公开(公告)号:CN116244759A
公开(公告)日:2023-06-09
申请号:CN202310253116.5
申请日:2023-03-15
申请人: 新华三大数据技术有限公司
IPC分类号: G06F21/64 , G06F16/242 , G06F16/248
摘要: 本发明公开一种基于计算引擎的请求验证方法、装置及系统,所述方法包括:接收来自客户端的SQL请求,解析所述SQL请求得到原始数据表,所述原始数据表中包括至少一个SQL语句使用的至少一个表名,并设置与每个所述表名对应的临时表名;发送创建指令,创建指令用于创建与原始数据表结构相同、表名不同的临时数据表;向创建的临时数据表中写入少量数据;用临时数据表中表名替换原始数据表中的表名生成目标SQL语句,并发送目标SQL语句,该目标SQL语句在被写入少量数据的临时数据表执行时输出运行结果,该运行结果用于验证SQL请求,从而避免运算原始数据表中的大量数据,本方法提高验证效率和数据安全性。
-
公开(公告)号:CN111444714B
公开(公告)日:2023-04-07
申请号:CN202010132022.9
申请日:2020-02-29
申请人: 新华三大数据技术有限公司
IPC分类号: G06F40/289 , G06F40/151 , G06N3/0442 , G06N3/04 , G06N3/084
摘要: 本发明提出一种文本分析装置、方法及模型训练方法,本发明提供的文本分析模型使用了多层密集连接的双向循环神经网络层,该模型使用一种密集连接的方式将之前所有双向RNN层的输出以及网络的原始输入连接起来,作为下一层双向RNN的输入,该模型结构能最大化信息流并在模型的反向传播训练过程中能保证梯度不会太小,使得误差不会因为层数的加深而不能有效传播,不同层的状态可实现自由拼接组合。本发明能够更好地提取文本特征,提高文本分析的准确性和鲁棒性。
-
公开(公告)号:CN113411254B
公开(公告)日:2023-03-31
申请号:CN202110520177.4
申请日:2021-05-13
申请人: 新华三大数据技术有限公司
摘要: 本申请提供了一种链路处理方法及装置,该方法应用于第一交换机,第一交换机接收第二交换机发送的第一链路层发现协议LLDP报文,所述第一LLDP报文包括第二交换机的成员链路的第一聚合模式和成员链路的第一链路状态;检测自身的成员链路的第二聚合模式和成员链路的第二链路状态;针对每个成员链路,基于自身的第二聚合模式、所述第一交换机检测的该成员链路的第二链路状态、第二交换机发送的第一聚合模式和该成员链路的第一链路状态,对该成员链路进行处理。采用上述方法,解决了当两个交换机的聚合模式不一致时丢包的问题。
-
公开(公告)号:CN111694791B
公开(公告)日:2023-03-31
申请号:CN202010247815.5
申请日:2020-04-01
申请人: 新华三大数据技术有限公司
IPC分类号: G06F16/13 , G06F16/182
摘要: 本发明提供了一种分布式基础框架中的数据存取方法及装置,用于实现分布式基础框架中的存储于计算分离。本发明中,HDFS Client将待存储于云存储系统的文件切分成数据块,使用NameNode作为元数据管理服务管理文件与数据块之间的映射关系,将数据块存储于云存储系统中,当需要从云存储系统中读取文件时,根据NameNode管理的文件与数据块的映射关系可开启多个任务并行从云存储系统中读取多个数据块。本发明实现了分布式基础框架中计算资源与存储资源的分离部署,不需要对上层的分布式并行计算框架进行修改,具有很好的兼容性,同时解决了分布式文件系统与云存储系统权限管理模型不一致导致鉴权过程复杂、文件重命名性能差的技术问题。
-
公开(公告)号:CN112306639B
公开(公告)日:2023-02-24
申请号:CN202011253110.0
申请日:2020-11-11
申请人: 新华三大数据技术有限公司
IPC分类号: G06F9/455
摘要: 本申请实施例提供了一种虚拟桌面的测试方法及装置,包括:客户端获取共享设备中存储的预设数量个用户对应的对象文件;根据每个用户对应的对象文件,启动该用户对应的客户端进程,该用户对应的客户端进程与服务器中该用户对应的虚拟机连接;通过每个用户对应的客户端进程,向服务器中该用户对应的虚拟机发送自动化脚本运行指令;服务器中该用户对应的虚拟机根据自动化脚本运行指令,运行该用户对应的虚拟机存储的软件的自动化脚本,服务器中测试虚拟机在每个用户对应的虚拟机运行自动化脚本的过程中,收集服务器的性能参数。应用本申请实施例提供的技术方案,在模拟真实应用场景,来测试虚拟机的运行状态时,降低了物力成本和人力成本。
-
公开(公告)号:CN110519079B
公开(公告)日:2022-11-25
申请号:CN201910705532.8
申请日:2019-08-01
申请人: 新华三大数据技术有限公司
IPC分类号: H04L41/0803 , H04L45/58 , H04L49/253
摘要: 本公开提供了一种数据转发方法、装置、网板、网络设备和存储介质,用以减少跨堆叠设备数据报文转发路径迂回,提高数据报文转发效率。所述数据转发方法,包括:接收待转发数据报文,所述待转发数据报文中携带有目的设备标识;如果判断出所述待转发报文为不同堆叠设备之间传输的数据报文,则根据所述目的设备标识确定连接目的堆叠设备的数据转发端口,所述数据转发端口与其他堆叠设备连接;利用确定出的数据转发端口与目的堆叠设备的数据转发端口之间的直连链路,转发所述待转发数据报文。
-
公开(公告)号:CN112130997B
公开(公告)日:2022-09-20
申请号:CN202011004507.6
申请日:2020-09-22
申请人: 新华三大数据技术有限公司
发明人: 白晨
IPC分类号: G06F9/50
摘要: 本发明实施例提供了一种资源分配方法及装置,涉及云服务技术领域,其中,上述方法包括:获得处于运行状态的各数据处理进程的已分配资源量及最大资源使用率。根据各数据处理进程的已分配资源量及最大资源使用率,确定各数据处理进程的消耗资源量。以各个数据处理进程的消耗资源量为基准,根据计算资源的总资源量,为各数据处理进程模拟分配计算资源,得到各数据处理进程的模拟资源量。根据各数据处理进程的模拟资源量,确定进行计算资源分配的资源量阈值。在存在新的数据处理进程的情况下,基于资源量阈值为新的数据处理进程分配计算资源。应用本发明实施例提供的方案分配资源,可以减小计算资源的浪费。
-
-
-
-
-
-
-
-
-