-
公开(公告)号:CN118296199A
公开(公告)日:2024-07-05
申请号:CN202410384094.0
申请日:2024-03-29
申请人: 上海交通大学 , 脸萌有限公司 , 北京字跳网络技术有限公司
IPC分类号: G06F16/903 , G06F16/901 , G06F9/48 , G06F9/50
摘要: 本公开实施例提供一种图数据处理方法、设备及存储介质,在图形处理器中获取针对图结构的查询请求,以请求在图结构中基于指定的起始节点查询子图结构,并对查询请求依次生成采样任务;在图形处理器的任一线程块中调用图形处理器中的计算引擎选择与采样任务的任务量匹配的目标采样器执行采样任务,以在采样任务指定的起始节点基础上选择下一目标邻居节点,并作为新的起始节点生成新采样任务;根据依次选择的目标邻居节点形成子图结构作为查询请求的查询结果。本公开将图形处理器线程块的线程组织成不同的采样器,动态随机游走的查询请求的采样任务根据任务量选择目标采样器,实现资源动态分配,提高图形处理器执行动态随机游走的负载均衡和并发度。
-
公开(公告)号:CN116302481B
公开(公告)日:2024-05-14
申请号:CN202310018597.1
申请日:2023-01-06
申请人: 上海交通大学
摘要: 一种基于稀疏知识图谱链接预测的资源分配方法及系统,通过对集群待调度执行的负载进行分析得到在不同资源配置下任务的运行时间并离散化后构建并更新任务‑资源配置知识图谱,得到稀疏知识图谱;通过残差关系图神经网络对稀疏知识图谱进行表征学习,得到知识图谱中每个资源配置和负载节点和边的向量表征,再利用多通道三维卷积TransE算法(MCTE)对负载节点进行最适资源预测并根据预测得到的资源配置,为负载分配相应的资源和服务器。本发明能够对负载进行更高效的调度,更有效地保证任务的QoS以及提高数据中心的资源利用率。
-
公开(公告)号:CN117785796A
公开(公告)日:2024-03-29
申请号:CN202410003678.9
申请日:2024-01-02
申请人: 上海交通大学
IPC分类号: G06F15/82 , G06F15/177 , G06F9/38
摘要: 一种基于中心‑单机双端交互架构的轨迹采集选核方法及系统,由中心控制端进行对应用轨迹的采集指令下发,中心控制端根据采集指令缓存发送指令,当缓存未命中则由单机端进行指令生成;单机端接收指令后,通过采集指令解析判断采集指令为默认指令时,根据Binary检测、线程数检测、单机负载检测以及随机选核生成对应指令进行PT数据采集,否则根据指令中的采集配置进行采集;采集完毕后,单机端将采集数据包和采集指令反馈到中心控制端进行数据分析。本发明通过中心‑单机双端采集交互,基于硬件追踪的采集能力进行应用的执行程序流采集,能够显著提高采集数据的覆盖率以及整个采集流程的效能。
-
公开(公告)号:CN117609227A
公开(公告)日:2024-02-27
申请号:CN202311491878.5
申请日:2023-11-09
申请人: 北京火山引擎科技有限公司 , 脸萌有限公司 , 上海交通大学
摘要: 本公开实施例提供一种数据处理方法、装置及电子设备,在社区划分场景中通过多个线程使用基于原子操作指令实现的细粒度锁,对关系网络并行执行社区划分算法以实现社区划分。由于原子操作指令实现的细粒度锁将取值、累加、比较和替换操等操作封装为指令级原子操作,以发挥原子操作的不可拆分性,以保障拥有细粒度锁的线程,在执行对应操作过程中不会被打断,从而提高了社区划分的效率和稳定性。
-
公开(公告)号:CN110827159B
公开(公告)日:2023-11-03
申请号:CN201911093161.9
申请日:2019-11-11
申请人: 上海交通大学
IPC分类号: G06Q40/08
摘要: 本发明提供了一种基于关系图的金融医疗保险诈骗预警方法,所述方法对医疗实体及实体间的统计相关数据之离散分布进行构图,通过对其关系网络进行分析,利用传播算法迭代寻找欺诈嫌疑人,并重新构图利用用户画像缩小嫌疑人范围,进一步筛选出具有欺诈行为的团伙,以便于相关人员分配资源推进下一步的调查。同时提供了一种用于执行上述基于关系图的金融医疗保险诈骗预警方法的金融医疗保险检测装置及终端。本发明利用图计算技术分析医疗保险关系网络,不需人工设定规则,能够实现更加高效、快速、灵活的欺诈侦测,满足相关行业的需求。
-
公开(公告)号:CN116703205A
公开(公告)日:2023-09-05
申请号:CN202310518524.9
申请日:2023-05-09
申请人: 国网宁夏电力有限公司吴忠供电公司 , 国网宁夏电力有限公司电力科学研究院 , 国网宁夏电力有限公司宁东供电公司 , 国网宁夏电力有限公司 , 上海交通大学
IPC分类号: G06Q10/0639 , G06Q50/06 , G06F17/18 , G06F17/15
摘要: 一种基于二进制麻雀算法的电压暂降监测器优化配置方法和系统。该方法包括,获取电压暂降可观测性指标、电压暂降监测信息的冗余度和电压暂降监测器的配置数量,并根据所述电压暂降可观测性指标、电压暂降监测信息的冗余度和电压暂降监测器的配置数量,确定电压暂降监测器的优化配置指标;根据所述电压暂降监测器的优化配置指标,构建电压暂降监测器优化配置模型;采用二进制麻雀算法对所述电压暂降监测器优化配置模型进行求解,得到所述电压暂降监测器的优化配置结果。本发明的技术方案考虑了电压暂降监测器的经济成本,并且以电压暂降的性能指标作为最优侧重点,实现了电压暂降监测器的优化配置。
-
公开(公告)号:CN116185610A
公开(公告)日:2023-05-30
申请号:CN202211692197.0
申请日:2022-12-28
摘要: 本发明提供一种基于神经网络中静态计算图的内存优化方法及电子设备,所述方法包括:识别神经网络静态计算图中前向兼容算子;消除与所述前向兼容算子对应的与后向自动微分相关的子图;生成与所述前向兼容算子对应的前向求导子图,并输出当前的神经网络静态计算图。本发明能够在不引入额外计算开销的情况下,通过自动优化静态计算图有效降低大部分神经网络激活函数的内存占用;本发明为大模型在内存受限设备上进行训练提供了有效支持,为新型激活函数的大规模应用铺平了道路,为大型神经网络基于静态计算图的训练节约了大量内存资源。
-
公开(公告)号:CN114205419B
公开(公告)日:2023-04-18
申请号:CN202111524128.4
申请日:2021-12-14
申请人: 上海交通大学
摘要: 一种面向微服务多维扰动特征的数据中心请求调度系统及方法,包括:微服务特征获取模块、微服务并行化模块和运行时优化模块,其中:微服务特征获取模块采集并刻画微服务的内部运行逻辑、微服务运行时间与资源供给关系以及微服务所处的网络条件三个方面的扰动特征;微服务并行化模块根据请求调用的微服务的扰动特征的互补性编排为最优的微服务并行化流水线各阶段;运行时优化模块解决微服务并行化流水线在实际运行时因扰动特征而造成的时间变化实时问题、资源变化实时问题和顺序变化实时问题;本发明通过采集并刻画不同微服务运行时的多维扰动特征并针对微服务运行时的多维扰动特征进行一种并行化的互补调度,搭建不同请求调用的不同微服务间的并行化流水线;本发明能够提高微服务架构应用请求调度的资源利用率和吞吐量。
-
公开(公告)号:CN115495246A
公开(公告)日:2022-12-20
申请号:CN202211212624.0
申请日:2022-09-30
申请人: 上海交通大学
摘要: 一种分离式内存架构下的混合远内存调度方法,首先通过限制应用本地内存使用的方式收集运行时数据,从而将任务分为远内存不敏感型任务、远内存敏感型任务和远内存禁止使用型任务;根据敏感程度互补原则,将内存不敏感型任务和内存敏感型任务分配到同一个计算节点,根据任务在同等性能限制条件下的最大可让出内存,当对应的服务器之间的整体可出让内存值相差较大时进行跨节点的内存资源调整,确定服务器的出让的内存值或者租借的远内存值,之后进行节点内部的内存资源调整,根据服务器的当前剩余内存资源,按照敏感型任务更多额外本地内存资源的原则,为每个任务进行资源分配,实现混合远内存调度。本发明充分挖掘应用在远内存环境下的特点,继而通过高效的远内存分配策略,提升数据中心中的内存利用率和使用效率。
-
-
-
-
-
-
-
-
-