-
公开(公告)号:CN117609227B
公开(公告)日:2025-03-28
申请号:CN202311491878.5
申请日:2023-11-09
Applicant: 北京火山引擎科技有限公司 , 脸萌有限公司 , 上海交通大学
Abstract: 本公开实施例提供一种数据处理方法、装置及电子设备,在社区划分场景中通过多个线程使用基于原子操作指令实现的细粒度锁,对关系网络并行执行社区划分算法以实现社区划分。由于原子操作指令实现的细粒度锁将取值、累加、比较和替换操等操作封装为指令级原子操作,以发挥原子操作的不可拆分性,以保障拥有细粒度锁的线程,在执行对应操作过程中不会被打断,从而提高了社区划分的效率和稳定性。
-
公开(公告)号:CN119040307A
公开(公告)日:2024-11-29
申请号:CN202411309083.2
申请日:2024-09-19
Applicant: 上海交通大学 , 上海大井生物工程有限公司 , 河套学院
Abstract: 本发明公开了抗小斑病哈茨木霉Thph2蛋白、玉米ZmGLP1‑17蛋白及转基因玉米制备方法。一种哈茨木霉T30纤维二糖水解酶蛋白Thph2及其编码基因,诱导玉米类萌发素蛋白ZmGLP1‑17响应及在抗玉米小斑病性中的应用。本发明通过转基因技术构建过表达Thph2基因的哈茨木霉菌株OEthph2,证明OEthph2可在玉米根部诱导类萌发素蛋白ZmGLP1‑17,并且提高玉米叶片对玉米小斑病菌侵染的抗性。本发明构建ZmGLP1‑17转基因玉米材料,将OEthph2工程菌与ZmGLP1‑17转基因玉米材料相结合,可协同提高对玉米小斑病防治效果。
-
公开(公告)号:CN111553834B
公开(公告)日:2023-11-03
申请号:CN202010332908.8
申请日:2020-04-24
Applicant: 上海交通大学
IPC: G06T1/20
Abstract: 一种基于FPGA的并发图数据预处理方法,从图数据格式信息输入集合和算法信息输入集合中提取源图数据块和图数据特征并生成图数据与图算法组合矩阵,进行的图数据格式预转换;然后根据图数据的幂律性,通过流式驱动调度确定进程分配方式后,再根据异构平台中FPGA加速器的属性参数进行匹配的数据分块与并行设计;从而实现整个并行图处理过程在FPGA上的数据预处理与调度优化的实现流程。本发明通过结合GPU和FPGA加速平台的并发调度策略,在选择最优的数据格式后通过整体预处理和调度优化得到了资源利用率和整体性能的显著提升,保证了图计算过程的高效性。
-
公开(公告)号:CN115495246B
公开(公告)日:2023-04-18
申请号:CN202211212624.0
申请日:2022-09-30
Applicant: 上海交通大学
Abstract: 一种分离式内存架构下的混合远内存调度方法,首先通过限制应用本地内存使用的方式收集运行时数据,从而将任务分为远内存不敏感型任务、远内存敏感型任务和远内存禁止使用型任务;根据敏感程度互补原则,将内存不敏感型任务和内存敏感型任务分配到同一个计算节点,根据任务在同等性能限制条件下的最大可让出内存,当对应的服务器之间的整体可出让内存值相差较大时进行跨节点的内存资源调整,确定服务器的出让的内存值或者租借的远内存值,之后进行节点内部的内存资源调整,根据服务器的当前剩余内存资源,按照敏感型任务更多额外本地内存资源的原则,为每个任务进行资源分配,实现混合远内存调度。本发明充分挖掘应用在远内存环境下的特点,继而通过高效的远内存分配策略,提升数据中心中的内存利用率和使用效率。
-
公开(公告)号:CN115855405A
公开(公告)日:2023-03-28
申请号:CN202211547980.8
申请日:2022-12-05
Applicant: 上海交通大学
Abstract: 本发明提供了海洋工程技术领域一种模拟海洋立管遭受海洋流与平台多自由度运动的试验装置,包括海洋立管试验模型、模型安装平台、多自由度运动装置。海洋立管试验模型通过模型安装平台连接多自由度运动装置做x、y、z任意方向的多自由度运动。海洋立管试验模型通过多自由度运动装置连接拖车在拖曳水池中做不规则任意方向的多自由度运动。通过采用多自由度运动装置和拖车在拖曳水池中拖动结合使用,改进了原有试验装置只能模拟海洋流或者平台多自由度运动的现状,能够将二者联合研究,试验结果更加接近真实情况。
-
公开(公告)号:CN112817767B
公开(公告)日:2021-11-16
申请号:CN202110209494.4
申请日:2021-02-24
Applicant: 上海交通大学
Abstract: 一种分离可组合式架构下的图计算工作集优化实现方法及系统,以数据段为单位,对待处理的图计算任务进行数据段识别;将图计算数据段按照四象限法划分为四大集合,进而根据读写访问热度进一步将四个集合划分为热工作集,即不可迁移工作集和冷工作集,即可迁移工作集;自动化调节可迁移工作集的本地与远程比例,根据图计算遍历过程中边数据只读不写的特性,向远程内存阶段进行单边远内存访问并读回索引所对应的数据块,实现灵活地将图计算任务的部分运行时数据拓展到远程内存资源。
-
公开(公告)号:CN112817887B
公开(公告)日:2021-09-17
申请号:CN202110209483.6
申请日:2021-02-24
Applicant: 上海交通大学
Abstract: 一种分离可组合式架构下的远内存访问优化方法及系统,首先按照应用的内存读写频率将可写工作集部署在本地计算节点,将只读工作集部署在远端内存节点上;在数据传输的过程中根据硬件资源特征选取合适的默认数据块大小,通过将数据块设置索引,结合RDMA传输过程动态分块实现数据块的透明分散和整合;利用单边读写和基于队列的RDMA机制实现配合本地应用读写的双向单边操作机制;利用基于事件通知的异步读写机制设置缓冲区实现本地计算和RDMA数据读写的异步并行处理。本发明可以充分挖掘应用层计算任务使用RDMA访问远内存的性能潜力。
-
公开(公告)号:CN112346869B
公开(公告)日:2021-07-13
申请号:CN202011244031.3
申请日:2020-11-10
Applicant: 上海交通大学
Abstract: 一种自适应的面向大图的统一内存管理方法,对图计算应用中的不同类型的图数据按照优先级顺序,依次通过GPU内存判断检查当前GPU内存是否已满、通过数据超出判断当前的图数据的大小是否超出GPU的可用内存容量再进行统一内存管理策略配置。本发明针对图数据的特点采用不同的图算法,结合GPU可用内存的大小,能够显著提升统一内存架构下处理超过显存容量的大图的性能,包括提高GPU带宽利用率、减少缺页的次数和处理缺页的开销,加快图计算程序的运行时间。
-
公开(公告)号:CN119415253A
公开(公告)日:2025-02-11
申请号:CN202411458241.0
申请日:2024-10-18
Applicant: 上海交通大学
IPC: G06F9/50 , G06F12/02 , H04L67/1097 , G06F18/25
Abstract: 一种多后端分离式内存系统及其优化控制方法,包括:智能远内存多后端管理控制模块和多后端远内存交换器,其中:智能远内存多后端管理控制模块对发生页面错误并触发页面交换的调用进行分析和处理,得到切换指令信息和参数调控指令信息;多后端远内存交换器接收并执行切换指令信息和参数调控指令信息,在分离式内存架构和多后端远内存软件系统上运行应用,并在运行结束后释放资源。本发明通过支持多个异构的远端的分离式内存后端的内存交换策略和系统架构,实现多路远内存访问并行以提升数据吞吐量的同时,分析应用特点并实现智能后端切换和数据交换参数调整,能够实现多个内存交换后端设备的并行访问、远内存数据访问通路的细粒度参数配置、多个内存交换后端的实时切换、智能化的远内存访问通路的控制和管理方法。
-
公开(公告)号:CN118296199A
公开(公告)日:2024-07-05
申请号:CN202410384094.0
申请日:2024-03-29
Applicant: 上海交通大学 , 脸萌有限公司 , 北京字跳网络技术有限公司
IPC: G06F16/903 , G06F16/901 , G06F9/48 , G06F9/50
Abstract: 本公开实施例提供一种图数据处理方法、设备及存储介质,在图形处理器中获取针对图结构的查询请求,以请求在图结构中基于指定的起始节点查询子图结构,并对查询请求依次生成采样任务;在图形处理器的任一线程块中调用图形处理器中的计算引擎选择与采样任务的任务量匹配的目标采样器执行采样任务,以在采样任务指定的起始节点基础上选择下一目标邻居节点,并作为新的起始节点生成新采样任务;根据依次选择的目标邻居节点形成子图结构作为查询请求的查询结果。本公开将图形处理器线程块的线程组织成不同的采样器,动态随机游走的查询请求的采样任务根据任务量选择目标采样器,实现资源动态分配,提高图形处理器执行动态随机游走的负载均衡和并发度。
-
-
-
-
-
-
-
-
-