-
公开(公告)号:CN118568061A
公开(公告)日:2024-08-30
申请号:CN202411049488.7
申请日:2024-08-01
Applicant: 浙江大华技术股份有限公司
IPC: G06F16/16 , G06F16/11 , G06F16/172
Abstract: 本申请提出一种小文件处理方法、装置以及计算机存储介质,所述小文件重写方法包括:获取若干待重写小文件的文件分区;按照所述文件分区对所述待重写小文件进行分组,获取若干文件组;根据每个文件组中的文件数量和/或文件大小判断所述文件组是否满足重写条件;若是,生成目标文件组的重写任务;基于所述重写任务对满足所述目标文件组进行重写。通过上述方式,根据文件组的文件情况对每个文件组进行自动重写,提高重写效率。
-
公开(公告)号:CN116450475A
公开(公告)日:2023-07-18
申请号:CN202310171335.9
申请日:2023-02-15
Applicant: 浙江大华技术股份有限公司
IPC: G06F11/34 , G06F11/30 , G06N3/0442
Abstract: 本申请公开了一种磁盘故障预测系统,其中,磁盘故障预测系统包括:数据采集模块用于采集磁盘数据,并将采集到的各条磁盘数据分别发送至数据分发模块;离线存储模块用于从数据分发模块获取磁盘数据,并累积第一时段内磁盘数据作为第一数据;离线计算模块用于从离线存储模块获取第一数据,并对第一数据提取第一特征;深度学习模块用于从离线计算模块获取第一特征,并基于第一特征进行训练优化;实时计算模块用于从数据分发模块获取当前采集的磁盘数据作为第二数据,以及对第二数据提取第二特征,且训练优化后的深度学习模块用于从实时计算模块获取第二特征,并基于第二特征得到磁盘当前的故障预测结果。上述方案,能够提高磁盘的故障预测精度。
-
公开(公告)号:CN119254776A
公开(公告)日:2025-01-03
申请号:CN202411784942.3
申请日:2024-12-06
Applicant: 浙江大华技术股份有限公司
IPC: H04L67/1001 , H04L67/1097 , H04L67/30 , G06F16/182
Abstract: 本申请公开了一种集群部署方法、设备以及存储介质,该集群部署方法包括:响应于接收到待部署任务,根据待部署任务的初始部署信息确定对应的集群部署策略;根据集群部署策略,将从初始部署信息中解析出的目标部署信息与集群中各个候选设备的候选设备信息进行对比,得到信息对比结果;将表征信息一致的信息对比结果所对应的候选设备确定为目标设备;将待部署任务部署至目标设备。上述方案,能够提高集群部署过程的灵活性。
-
公开(公告)号:CN118568061B
公开(公告)日:2024-11-29
申请号:CN202411049488.7
申请日:2024-08-01
Applicant: 浙江大华技术股份有限公司
IPC: G06F16/16 , G06F16/11 , G06F16/172
Abstract: 本申请提出一种小文件处理方法、装置以及计算机存储介质,所述小文件重写方法包括:获取若干待重写小文件的文件分区;按照所述文件分区对所述待重写小文件进行分组,获取若干文件组;根据每个文件组中的文件数量和/或文件大小判断所述文件组是否满足重写条件;若是,生成目标文件组的重写任务;基于所述重写任务对满足所述目标文件组进行重写。通过上述方式,根据文件组的文件情况对每个文件组进行自动重写,提高重写效率。
-
公开(公告)号:CN117891827A
公开(公告)日:2024-04-16
申请号:CN202311793323.6
申请日:2023-12-22
Applicant: 浙江大华技术股份有限公司
IPC: G06F16/242 , G06F16/2455 , G06F16/248 , G06F16/2453 , G06F9/50
Abstract: 本申请公开了一种数据处理方法、数据处理装置以及计算机存储介质,该数据处理方法包括:获取用户输入的数据库处理语句;对数据库处理语句进行分流处理,得到分流结果,基于分流结果确定数据库处理语句的处理引擎;基于处理引擎对数据库处理语句进行语句处理得到数据处理计划;使用处理引擎执行数据处理计划得到数据处理结果。通过上述方式,本申请通过对数据库处理语句进行分流处理得到对应的处理引擎,再基于处理引擎生成数据处理计划对数据进行处理的方法,可以减少重复生成数据处理计划的冗余步骤,在保证数据被正常处理的同时降低了数据处理的耗时,从而提高了数据处理的效率。
-
公开(公告)号:CN108174281A
公开(公告)日:2018-06-15
申请号:CN201810055493.7
申请日:2018-01-19
Applicant: 浙江大华技术股份有限公司
Inventor: 陈文灿
IPC: H04N21/433 , H04N21/44
Abstract: 本发明提供一种视频倒放方法、装置、系统、介质及设备,其中应用于服务器的方法包括:接收客户端发送的视频倒放请求,所述视频倒放请求中携带视频标识以及所述客户端支持的至少一种图片格式;读取所述视频标识对应的视频文件,所述视频文件包括多个视频帧以及各个视频帧的播放时间戳;以及,从所述至少一种图片格式中选取一种图片格式,作为指定格式;针对所述视频文件中的每个视频帧,将该视频帧转换为所述指定格式的图片,并将该视频帧的播放时间戳与该图片进行关联;将转换得到的图片以及图片关联的播放时间戳发送给所述客户端,以使所述客户端对图片进行倒序展示。本发明提供的实施方式能够在一定程度上减少画面卡顿现象的出现。
-
公开(公告)号:CN118626211B
公开(公告)日:2024-11-08
申请号:CN202411092063.4
申请日:2024-08-09
Applicant: 浙江大华技术股份有限公司
Abstract: 本申请公开了一种资源管理方法、电子设备及计算机可读存储介质,该方法包括:获取数据湖中对应同一预设资源组的目标表数据以及目标表数据中的当前待重写文件;根据当前待重写文件的当前重写代价和目标表数据中历史重写文件的历史重写代价信息确定目标表数据中当前待重写文件的当前重写时间,重写代价表征重写对应待重写文件所需资源数据;根据预设资源组中优化容器的预设优化时间和当前重写时间从预设资源组中确定待调取优化容器的目标数量;以目标数量对目标表数据中的当前待重写文件进行重写处理。由此保证了文件重写的效率以及资源隔离。
-
公开(公告)号:CN118626211A
公开(公告)日:2024-09-10
申请号:CN202411092063.4
申请日:2024-08-09
Applicant: 浙江大华技术股份有限公司
Abstract: 本申请公开了一种资源管理方法、电子设备及计算机可读存储介质,该方法包括:获取数据湖中对应同一预设资源组的目标表数据以及目标表数据中的当前待重写文件;根据当前待重写文件的当前重写代价和目标表数据中历史重写文件的历史重写代价信息确定目标表数据中当前待重写文件的当前重写时间,重写代价表征重写对应待重写文件所需资源数据;根据预设资源组中优化容器的预设优化时间和当前重写时间从预设资源组中确定待调取优化容器的目标数量;以目标数量对目标表数据中的当前待重写文件进行重写处理。由此保证了文件重写的效率以及资源隔离。
-
公开(公告)号:CN118210625A
公开(公告)日:2024-06-18
申请号:CN202410270574.4
申请日:2024-03-08
Applicant: 浙江大华技术股份有限公司
Abstract: 本申请涉及计算资源管理领域,尤其涉及一种资源隔离方法及相关装置,其中,方法包括:集群中的协调器接收至少一个客户端各自发送的携带有客户端标识的资源分配请求后,分别将针对各客户端分配的资源对应的资源标识集合和相应的客户端标识,关联保存在资源配置文件中;进一步的,协调器接收任意一个客户端提交的携带相应客户端标识的任务信息,然后,从资源配置文件中,获得对应接收到的客户端标识的待分配资源标识集合,调用待分配资源标识结合对应的资源,对任务信息进行相应处理,这样,通过资源配置文件,为不同租户分配不同的资源,实现了不同租户之间的资源隔离,解决了不同租户之间的资源使用相互干扰的问题。
-
公开(公告)号:CN113377500A
公开(公告)日:2021-09-10
申请号:CN202110925704.X
申请日:2021-08-12
Applicant: 浙江大华技术股份有限公司
IPC: G06F9/455 , G06F9/50 , G06F16/182
Abstract: 本发明公开了一种资源调度方法、装置、设备及介质,所述方法包括:在Kubernetes系统中部署Hadoop系统的各个应用,获取所述各个应用的资源占用率数据;当根据所述各个应用的资源占用率数据确定满足触发资源调度条件,且当前不处于预设的冷却期内时,根据预先设定的资源调度策略进行资源调度,并重新进入冷却期。本发明实施例提供的方案实现了Hadoop系统资源的按需分配,解决了现有技术中Hadoop系统资源闲时浪费,忙时不足的问题,并且通过设置冷却期,避免了资源调度后,又满足触发资源调度触发条件反复进行资源调度的问题。
-
-
-
-
-
-
-
-
-