收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

一种基于Spark的语义推理引擎实现及应用

黄崛  
【摘要】:近些年在知识图谱蓬勃发展的大背景下,与之相关的语义Web的数据规模也呈现爆发态势。如何在大规模语义Web数据上有效地进行语义推理是研究者们面临的棘手问题。具体来说,在大规模语义Web数据上实施语义推理时,计算量巨大、消耗时间长都是突出的问题,特别是当应用复杂规则逻辑进行推理时,情况更是如此。传统单机环境下的语义推理引擎无法应对大规模知识图谱下的推理,缺乏可扩展性方面的考虑,难以满足在数据规模上日益增长的语义关联数据的推理需求。从分布式角度来看,已有的基于Hadoop MapReduce实现的语义推理框架由于欠缺推理算法相关的网络通信和磁盘I/O等的优化,推理效率依然较低。本文针对上述问题,围绕分布式内存计算平台Spark,研究以下几个方面的内容:首先设计一个良好模块化且推理规则可配置的完整分布式推理引擎架构。接着研究现有的单机和分布式语义推理算法,基于Spark框架对相关算法进行分布式的实现,并针对Spark的原理和特点做相应的优化。将基于Spark实现的推理引擎与现有的传统分布式推理引擎在推理效率上进行对比实验。实验结果表明,本文设计的基于Spark的语义推理引擎在推理效率上要远好于以Hadoop MapReduce为代表的推理实现,同时兼具了高可扩展性。最终将本系统应用到物联网领域,适应实时和流式的语义数据流处理和推理场景。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 闫林;张学栋;魏雁天;何建仓;;粒空间中基于粒计算的粒语义推理[J];模式识别与人工智能;2008年04期
2 闫林;刘清;庞善起;;基于粒语义推理的粒归结研究[J];计算机科学;2009年01期
3 吴士珑;自然语言的语义推理的一种方法[J];通信学报;1982年02期
4 宋岚;黄兆华;;基于本体的语义推理研究[J];华东交通大学学报;2007年02期
5 危辉;危炜;;言语获取、理解和生成过程中的语义推理问题[J];计算机科学;2002年05期
6 段汝林;;基于本体知识库的语义推理机制研究[J];数字技术与应用;2012年05期
7 徐守坤;孙德超;石林;李宁;;基于语义推理的学习资源推荐[J];计算机工程与设计;2014年04期
8 聂卉;龙朝晖;;描述逻辑语义推理机制的应用研究[J];现代图书情报技术;2006年11期
9 吴川,马宇飞,贺玉文,钟玉琢,张宏江;体育视频中基于语义推理的事件检测方法[J];清华大学学报(自然科学版);2003年04期
10 涂春梅;;基于语义的文献检索系统研究[J];软件导刊;2012年03期
11 汤怡洁;周子健;;语义web环境下语义推理的研究与实现[J];图书馆杂志;2011年03期
12 时鸿涛;;基于ALICE的语义推理接口[J];计算机应用与软件;2010年11期
13 李太航;黄倩;赵红;沈祖梁;;Fuzzy语义推理的自学习算法[J];自动化学报;1984年04期
14 刘嘉;童格明;李明;臧凤奎;;基于本体的UML类图语义推理[J];计算机应用与软件;2011年04期
15 万昌江;古飚;鲁玉军;;语义推理驱动的协同装配技术[J];计算机集成制造系统;2010年09期
16 王金环;李宝敏;;基于本体DL的语义推理研究[J];计算机技术与发展;2009年11期
17 陈和平;郭晶晶;吴怀宇;杨玲贤;吕洪敏;吴威;;基于Ontology和Jena的个性化E-Learning系统研究[J];武汉理工大学学报(交通科学与工程版);2007年06期
18 宗南苏;郑业鲁;;基于本体与SWRL的鳜鱼疾病诊断知识表示与语义推理[J];农业图书情报学刊;2009年06期
19 代晏;张波涛;;基于工业消防本体的语义推理研究[J];工业控制计算机;2013年09期
20 陈天莹;苏智慧;;基于语义推理的文本信息关联关系分析技术[J];电讯技术;2014年01期
中国重要会议论文全文数据库 前1条
1 鞠实儿;;基于开放世界假设的三值逻辑的语义推理系统[A];开放类逻辑论文集[C];2004年
中国博士学位论文全文数据库 前2条
1 邬俊;基于交互式语义推理的图像检索算法研究[D];大连海事大学;2010年
2 陈曦;面向大规模知识图谱的弹性语义推理方法研究及应用[D];浙江大学;2017年
中国硕士学位论文全文数据库 前9条
1 杨金桂;面向农业云本体的语义推理方法研究[D];安徽农业大学;2015年
2 张旭华;框架语义推理技术研究[D];山西大学;2016年
3 黄崛;一种基于Spark的语义推理引擎实现及应用[D];浙江大学;2017年
4 宗南苏;农业知识服务—蚁群算法与语义推理研究[D];中国农业科学院;2009年
5 张鑫华;基于语义推理的知识相似性与冲突检测研究[D];上海交通大学;2011年
6 彭虎;电信业务领域本体知识库的进化研究及语义推理服务的设计与实现[D];北京邮电大学;2011年
7 梁守青;支持语义推理的电信业务执行机制的研究与实现[D];北京邮电大学;2007年
8 舒琼;基于语义推理的中文食品推荐系统研究与应用[D];武汉科技大学;2013年
9 袁小娟;动画素材的领域本体模型与语义推理研究[D];湖南师范大学;2009年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978