深度学习任务调度方法及装置

    公开(公告)号:CN116257345A

    公开(公告)日:2023-06-13

    申请号:CN202310538218.1

    申请日:2023-05-15

    Abstract: 本发明提出一种深度学习任务调度方法及装置,涉及计算机技术领域,方法包括:获取预设的第一时间周期内已调度的序列深度学习任务,其中,序列深度学习任务是基于各个深度学习任务的数据量大小进行排序得到的;获取深度学习对应各个节点中任一目标处理器处理序列深度学习任务时对应的平均处理频率和平均处理时长;基于平均处理频率和平均处理时长,确定各个节点的优先级;基于优先级,将第二时间周期内对应实时序列深度学习任务中的各个实时深度学习任务调度到对应的目标节点进行处理,其中,第一时间周期与第二时间周期是连续周期且时长相同,由此,基于深度学习对应各个节点的优先级来进行深度学习任务的资源调度工作,提高深度学习任务调度的效率。

    爬虫链接模板的提取方法、装置、电子设备和存储介质

    公开(公告)号:CN115827941A

    公开(公告)日:2023-03-21

    申请号:CN202211448391.4

    申请日:2022-11-18

    Abstract: 本申请提出一种爬虫链接模板的提取方法、装置、电子设备和存储介质,其中,基于爬虫对网页采集的网页信息中的特征数据对应的格式特征,对网页信息中的标签进行排序,得到对应的第一标签序列,根据第一标签序列中各个标签的频率,筛选出大于预设频率阈值的第二标签序列,基于第二标签序列中预设的文本距离阈值和第二标签序列中各个标签的出现频次,确定候选标签模板,使用候选模板标签匹配网页,以得到包含候选模板标签的模板片段,并比较模板片段对应网页的文本与模板片段匹配的文本的差异,构造对应的正则表达式,再结合候选标签模板,组成网页的爬虫链接模板,由此,实现了网络页面爬虫链接模板的自动提取,提高网页全面信息的采集范围。

    一种应用服务多机热备方法、系统、设备及存储介质

    公开(公告)号:CN115774623A

    公开(公告)日:2023-03-10

    申请号:CN202211449733.4

    申请日:2022-11-18

    Abstract: 本发明公开了一种应用服务多机热备方法、系统、设备及存储介质,S1,搭建可供各服务节点访问的数据库服务,创建数据库,设计锁表,设计系统配置文件;S2,加载系统配置文件参数,在锁表中初始化应用的信息;S3,部署的多个应用服务同时竞争获取锁,获取到锁的应用服务执行业务逻辑,未获取到锁的应用定时请求获取锁;S4,获取到锁的应用服务执行业务逻辑的同时定时对锁续约。在对可用性有极高要求的多备机的场景下,保证服务单点执行。

Patent Agency Ranking