公开(公告)号：CN114489942A

公开(公告)日：2022-05-13

申请号：CN202210062739.X

申请日：2022-01-19

Applicant: 西安交通大学

Inventor： 徐亦飞 ,  王超勇 ,  朱利 ,  王正洋 ,  秦志强 ,  张扬 ,  张越皖 ,  尉萍萍

IPC: G06F9/455 ,  G06F9/48 ,  G06F9/54 ,  G06F11/30

Abstract: 本发明公开了一种面向应用集群的队列任务调度方法及系统，将线上和线下任务并存在Kubernetes集群中，基于打分策略对线下任务进行打分，并对线下任务进行优先级排定，保证优先级高的训练任务有着更少的等待时间的同时，考虑多方面因素来调整任务执行队列，对任务的动态变化进行实时监控，调整线上和线下任务的资源分配，保证线上任务的服务质量，同时可以根据不同维度手动暂停线下一个或者一批训练任务，和手动开启暂停的一个和一批训练任务，可应对突发事件或者特殊时期，提高了任务的分配效率，便于资源的管理和控制，解决了现有技术中，资源分配率低，服务质量低的问题。

公开(公告)号：CN114357970A

公开(公告)日：2022-04-15

申请号：CN202210010909.X

申请日：2022-01-05

Applicant: 西安交通大学

Inventor： 徐亦飞 ,  王超勇 ,  朱利 ,  王正洋 ,  秦志强 ,  张扬 ,  张越皖

IPC: G06F40/205 ,  G06F40/151

Abstract: 本发明提出了一种征信报告解析方法、系统、终端设备和存储介质，构建征信报告特征和征信报告特征组，并报告数据库中的征信报告标识，取出对应的征信报告，根据取出的征信报告，对征信报告特征进行计算；对征信报告所在文件夹内所有征信报告进行过滤、标记和计算，创建模型数据集，并将模型数据集保存至数据库。实现了同一个特征可以从不同格式的征信报告中，获取用户信息，并支持根据特定要求对用户信息的过滤，转化和函数计算，特征可以根据业务在线开发和计算，使征信报告的解析更加灵活，自动化和智能化，加快了征信报告的解析效率。解决了现有技术中针对不同样式的征信报告文件解析困难的问题。

公开(公告)号：CN114489942B

公开(公告)日：2024-02-23

申请号：CN202210062739.X

申请日：2022-01-19

Applicant: 西安交通大学

Inventor： 徐亦飞 ,  王超勇 ,  朱利 ,  王正洋 ,  秦志强 ,  张扬 ,  张越皖 ,  尉萍萍

IPC: G06F9/455 ,  G06F9/48 ,  G06F9/54 ,  G06F11/30

Abstract: 本发明公开了一种面向应用集群的队列任务调度方法及系统，将线上和线下任务并存在Kubernetes集群中，基于打分策略对线下任务进行打分，并对线下任务进行优先级排定，保证优先级高的训练任务有着更少的等待时间的同时，考虑多方面因素来调整任务执行队列，对任务的动态变化进行实时监控，调整线上和线下任务的资源分配，保证线上任务的服务质量，同时可以根据不同维度手动暂停线下一个或者一批训练任务，和手动开启暂停的一个和一批训练任务，可应对突发事件或者特殊时期，提高了任务的分配效率，便于资源的管理和控制，解决了现有技术中，资源分配率低，服务质量低的问题。

公开(公告)号：CN114676850A

公开(公告)日：2022-06-28

申请号：CN202210296057.5

申请日：2022-03-24

Applicant: 西安交通大学

Inventor： 秦志强 ,  王超勇 ,  邱壮壮 ,  魏星 ,  韩鑫 ,  张扬

IPC: G06N20/00 ,  G06F8/61

Abstract: 本发明公开了一种基于k8s的机器学习模型训练方法及系统，包括以下步骤：依次构建模型训练所需的镜像、算法和数据集；添加模型信息，并创建模型训练输出和训练任务日志输出的文件夹；将模型训练所需的信息保存到数据库；扫描数据库中的任务训练数据表，查看可执行任务，如果有，执行下一步，没有则等待下一次调度；查看K8S机器当前的资源是否满足任务执行需求，如果满足，执行下一步，不满足，则等待下一次调度；构建任务所需的yaml文件；调用k8s创建执行模型训练的job和相关的pv和pvc，开始模型训练。可以有效降低模型训练的难度，可以有效的降低系统的资源使用率，降低模型开发成本，解决了现有技术中维护成本高，模型支撑改进中支持的种类少的问题。