- 专利标题: 一种基于规则的Spark分布式弹性语义流推理方法
-
申请号: CN202110482360.X申请日: 2021-04-30
-
公开(公告)号: CN113191498B公开(公告)日: 2022-08-05
- 发明人: 李韧 , 张露伊 , 杨建喜 , 王桂平
- 申请人: 重庆交通大学
- 申请人地址: 重庆市南岸区学府大道66号
- 专利权人: 重庆交通大学
- 当前专利权人: 重庆交通大学
- 当前专利权人地址: 重庆市南岸区学府大道66号
- 代理机构: 重庆博凯知识产权代理有限公司
- 代理商 张先芸
- 主分类号: G06N5/04
- IPC分类号: G06N5/04 ; G06N5/02 ; G06F16/36
摘要:
本发明公开了一种基于规则的Spark分布式弹性语义流推理方法,包括:S1、获取RDF图;S2、为RDF图的标识符构建双向字典;S3、对RDF图进行划分得到模式图模型和实例图模型;S4、利用双向字典基于模式图模型和实例图模型设计对应的键值模型;S5、基于规则的Spark分布式弹性语义流推理引擎模块读取模式图模型和实例图模型中的模式数据和实例数据,根据RDFS规则的优化顺序执行Spark作业。与现有技术相比,本发明采用分布式内存计算模型Spark,把面向分布式数据集的操作抽象成面向本地数据集的操作,进一步提高了大数据处理环境下迭代计算的效率,并且实现了分布式的内存RDFS推理,有助于进一步提升RDFS推理效率和可扩展性。
公开/授权文献
- CN113191498A 一种基于规则的Spark分布式弹性语义流推理方法 公开/授权日:2021-07-30