收藏本站
《国防科学技术大学》 2010年
收藏 | 手机打开
二维码
手机客户端打开本文

面向网络舆情监控的热点话题发现技术研究

殷风景  
【摘要】:随着国家、企业对网络舆情的日益重视,越来越多的网络舆情监控系统被开发出来帮助政府、部门或企业应对在网络上爆发的关于自己的舆论压力或群体性事件。在使用门槛很低、信息披露很容易、传播很快、影响很大的互联网环境下,监控系统实时采集相关信息,智能分析信息内容,及时发现舆情危情,为自动化解决监看、处理网络舆情提供了很好的支持,极大地方便了用户,有力地辅助用户及时正确地处理舆情危情。 在大部分舆情监控的系统中,用户通过定制来源网站等信息让系统周期性地采集网站报道,经系统分析处理后将用户关心的报道呈现出来。在这个过程中,大量重复的或者描述同一事件的报道杂乱地出现在显示结果中,既不利于用户的查看、分析、总结,也不利于系统评价事件的报道详情、准确计算事件的热度,因而需要运用话题发现技术对这一问题进行改善。 本文首先研究了话题发现的关键技术,在分析话题发现流程后得出聚类是其中的关键步骤的结论,因此,接下来阐述了各种聚类算法的原理并以此为基础分析对比了各算法的利弊,最终选取了在话题发现的评测中使用最多的single-pass算法,然后分析了该算法从评测走向实际应用遇到的困难和制约因素,本文中从算法响应速度、聚类精度和用户介入等角度着手改进single-pass聚类算法,最终取得了良好的实际应用效果,达成了话题发现的目标。 接下来针对舆情监控的特定应用,研究热点发现的话题热度评价方法,在已有基于关注度的热度指标基础上,本文提出基于关注度和影响能力的综合热度指标,更加准确地契合舆情危情发现的目标,经过热度排序后的话题直观简洁地向用户推荐了舆情监控的急缓先后顺序,使用户可以更好地应对复杂多变的网络环境。 通过在舆情监控系统中整合话题发现技术和热点发现技术形成有机统一的热点话题发现模型,具有较高的应用价值;同时,虽然话题发现技术和热点发现技术的研究比较成熟,但技术的实用化过程中遇到很多问题严重制约了技术的效果,所以在舆情监控系统中建立热点话题发现模型也具有较高的研究意义和研究价值。文章最后通过运行实例和对比分析验证了模型的可行性和有效性。
【学位授予单位】:国防科学技术大学
【学位级别】:硕士
【学位授予年份】:2010
【分类号】:TP393.09

手机知网App
【引证文献】
中国期刊全文数据库 前1条
1 谢乾龙;徐蔚然;;基于自动机的微博在线突发话题检测算法[J];软件;2012年12期
中国硕士学位论文全文数据库 前5条
1 刘成文;潍坊市网络舆情监控系统的设计与实现[D];山东大学;2011年
2 张珺;基于Web公共舆情自动分析及预警关键技术研究[D];北京邮电大学;2012年
3 谢宜瑾;网络舆情分析与管理技术的研究与实现[D];广东工业大学;2012年
4 史鹏龙;军网舆情监测与信息处理平台的开发研究[D];兰州大学;2012年
5 陈澎;基于热点话题自动发现的网站搜索引擎优化[D];复旦大学;2012年
【参考文献】
中国期刊全文数据库 前8条
1 徐晓日;;网络舆情事件的应急处理研究[J];华北电力大学学报(社会科学版);2007年01期
2 赵华;赵铁军;张姝;王浩畅;;基于内容分析的话题检测研究[J];哈尔滨工业大学学报;2006年10期
3 贾自艳 ,何清 ,张海俊 ,李嘉佑 ,史忠植;一种基于动态进化模型的事件探测和追踪算法[J];计算机研究与发展;2004年07期
4 于满泉;骆卫华;许洪波;白硕;;话题识别与跟踪中的层次化话题识别技术研究[J];计算机研究与发展;2006年03期
5 李保利,俞士汶;话题识别与跟踪研究[J];计算机工程与应用;2003年17期
6 李伟;黄颖;;文本聚类算法的比较[J];科技情报开发与经济;2006年22期
7 骆卫华;于满泉;许洪波;王斌;程学旗;;基于多策略优化的分治多层聚类算法的话题发现研究[J];中文信息学报;2006年01期
8 宋丹;王卫东;陈英;;基于改进向量空间模型的话题识别与跟踪[J];计算机技术与发展;2006年09期
【共引文献】
中国期刊全文数据库 前10条
1 刘志红,何青;学分制条件下成人高等教育计算机管理教学的功能与特点[J];安徽电子信息职业技术学院学报;2004年02期
2 税仪冬;瞿有利;黄厚宽;;周期分类和Single-Pass聚类相结合的话题识别与跟踪方法[J];北京交通大学学报;2009年05期
3 焦健;瞿有利;;知网的话题更新与跟踪算法研究[J];北京交通大学学报;2009年05期
4 付艳;杨冬青;唐世渭;伍伟;王腾蛟;高军;;基于实体识别的在线主题检测方法[J];北京大学学报(自然科学版);2009年02期
5 陈纯柱;敖永春;;网络环境下高校舆情的传播及引导机制研究[J];重庆大学学报(社会科学版);2011年02期
6 吉国庆;;论计算机信息技术与高职院教学管理信息化[J];常州工程职业技术学院学报;2006年02期
7 王静,马方明;电厂基建管理系统的分析与设计[J];东莞理工学院学报;2005年01期
8 许志凯;徐志明;李栋;李生;;面向互联网新闻的话题检测与追踪[J];智能计算机与应用;2011年03期
9 周城;葛斌;蒋林承;;一种基于消息中间件的网页实时处理技术[J];电脑知识与技术;2011年10期
10 林斌;周凌炜;;发射机高压变压器温度自动监测控制系统[J];电子科技;2010年04期
中国重要会议论文全文数据库 前10条
1 彭楠赟;王厚峰;凌晨添;;基于层次聚类的网络新闻热点发现[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
2 张晓菲;张火明;高明正;;三种智能优化算法的研究进展[A];中国仪器仪表学会第十一届青年学术会议论文集[C];2009年
3 邱立坤;陶然;龙志祎;程葳;;面向互联网的话题发现技术研究[A];全国网络与信息安全技术研讨会论文集(下册)[C];2007年
4 胡吉祥;许洪波;刘悦;王斌;程学旗;;基于重复串的短文本聚类研究[A];全国第八届计算语言学联合学术会议(JSCL-2005)论文集[C];2005年
5 邱立坤;程葳;龙志祎;孙娇华;;面向BBS的话题挖掘初探[A];全国第八届计算语言学联合学术会议(JSCL-2005)论文集[C];2005年
6 宋丹;林鸿飞;杨志豪;;一种利用链接分析的Web话题跟踪方法[A];第三届学生计算语言学研讨会论文集[C];2006年
7 丁伟莉;赵华;郑德权;赵铁军;于浩;;中文Blog热门话题检测与排序技术研究[A];中文信息处理前沿进展——中国中文信息学会二十五周年学术会议论文集[C];2006年
8 张阔;李涓子;吴刚;;基于关键词元的话题内事件检测[A];第三届全国信息检索与内容安全学术会议论文集[C];2007年
9 曾依灵;许洪波;白硕;;改进的OPTICS算法及其在文本聚类中的应用[A];第三届全国信息检索与内容安全学术会议论文集[C];2007年
10 刘星星;何婷婷;龚海军;陈龙;;网络热点事件发现系统的设计[A];第四届全国学生计算语言学研讨会会议论文集[C];2008年
中国博士学位论文全文数据库 前10条
1 张晓艳;新闻话题表示模型和关联追踪技术研究[D];国防科学技术大学;2010年
2 杜萍;基于本体的中国行政区划地名识别与抽取研究[D];兰州大学;2011年
3 张玉强;网络舆情危机的政府适度反应研究[D];中央民族大学;2011年
4 仲兆满;事件本体及其在查询扩展中的应用[D];上海大学;2011年
5 刘玉国;基于内容的互联网舆情信息挖掘关键技术研究[D];山东大学;2011年
6 高田;基于领域知识的旅游突发事件状态评估与演化研究[D];北京邮电大学;2011年
7 王肃;基于多Agent的突发事件信息智能监测系统研究[D];北京邮电大学;2011年
8 吴永辉;面向专业领域的网络信息采集及主题检测技术研究与应用[D];哈尔滨工业大学;2010年
9 单建芳;面向事件的文本表示研究[D];上海大学;2012年
10 史树敏;基于领域本体的汉语共指消解及相关技术研究[D];南京理工大学;2008年
中国硕士学位论文全文数据库 前10条
1 秦璐;网络舆情引导方法研究[D];广西师范学院;2010年
2 秦宏宇;网络舆情热点发现相关技术研究[D];哈尔滨工程大学;2010年
3 刘振广;一种改进的k_means聚类算法研究[D];哈尔滨工程大学;2010年
4 欧阳小婷;企业危机中的网络舆论引导研究[D];湘潭大学;2010年
5 江涛;基于藏文web舆情分析的热点发现算法研究[D];西北民族大学;2010年
6 阿圆;高校校园网论坛热点话题发现系统的研究与实现[D];昆明理工大学;2009年
7 吕楠;话题追踪与演化分析技术研究[D];解放军信息工程大学;2009年
8 王允;网络舆情数据获取与话题分析技术研究[D];解放军信息工程大学;2010年
9 刘嵩;网络中文事件自动检测技术研究[D];解放军信息工程大学;2010年
10 梁越岭;互联网舆情信息挖掘与群体行为分析[D];武汉理工大学;2010年
【同被引文献】
中国期刊全文数据库 前10条
1 刘辉;邵良杉;;Web文本分类中特征项权重的研究[J];科技和产业;2010年02期
2 周云倩;陈信凌;;广电媒体网站评价的量化研究——以BBC、CNN和央视国际网站为样本[J];当代传播;2010年01期
3 袁文杰;杜宾;;J2EE架构技术分析[J];电脑学习;2008年02期
4 刘尚喜;蔡开裕;卓琳;;内网舆情信息监测系统研究与设计[J];电脑应用技术;2009年01期
5 聂璐;;搜索引擎在网络信息挖掘中的应用[J];电脑知识与技术;2009年27期
6 苏力华;朱章华;白文华;;基于向量空间模型的文本分类特征权重算法研究[J];电脑知识与技术;2010年33期
7 李海涛;葛强;;基于JSP的WEB数据库应用系统设计[J];福建电脑;2006年08期
8 虞欣平;董海量;;一种实用的网络舆情监控系统[J];福建电脑;2011年06期
9 李强;;创建决策树算法的比较研究——ID3,C4.5,C5.0算法的比较[J];甘肃科学学报;2006年04期
10 胡圣方;杨文德;;网络舆情管理的问题及对策[J];甘肃政法成人教育学院学报;2007年04期
中国重要会议论文全文数据库 前2条
1 郝文江;马晓明;武捷;;网络舆情现状分析与引导机制研究[A];全国计算机安全学术交流会论文集·第二十五卷[C];2010年
2 疏学明;郑魁;张辉;袁宏永;;突发事件中网络舆情信息管理方式探讨[A];中国突发事件防范与快速处置优秀成果选编[C];2009年
中国博士学位论文全文数据库 前2条
1 秦玉平;基于支持向量机的文本分类算法研究[D];大连理工大学;2008年
2 朱国东;关于网络舆论演进的若干问题研究[D];北京交通大学;2009年
中国硕士学位论文全文数据库 前10条
1 王允;网络舆情数据获取与话题分析技术研究[D];解放军信息工程大学;2010年
2 段晶;朴素贝叶斯分类及其应用研究[D];大连海事大学;2011年
3 徐东亮;基于聚类分析的网络论坛舆情信息挖掘技术研究[D];哈尔滨工业大学;2010年
4 单大甫;基于网络评论的文本倾向性分类技术的研究与实现[D];国防科学技术大学;2010年
5 刘玲玲;文本分类中的特征选择研究[D];中国石油大学;2011年
6 马伟瑜;基于改进的PageRank的网页信息可信度评估方法研究[D];河北大学;2011年
7 李志军;分布式结构与组件技术的应用研究[D];南京理工大学;2004年
8 陈传虹;基于三层结构的数据库管理信息系统的应用[D];重庆大学;2004年
9 苏力华;基于向量空间模型的文本分类技术研究[D];西安电子科技大学;2006年
10 柳培林;基于向量空间模型的中文文本分类技术研究[D];大庆石油学院;2006年
【二级参考文献】
中国期刊全文数据库 前10条
1 林鸿飞,高天,姚天顺;中文文本的可视化表示[J];东北大学学报;2000年05期
2 周水庚,周傲英,曹晶;基于数据分区的DBSCAN算法[J];计算机研究与发展;2000年10期
3 贾自艳 ,何清 ,张海俊 ,李嘉佑 ,史忠植;一种基于动态进化模型的事件探测和追踪算法[J];计算机研究与发展;2004年07期
4 李保利,俞士汶;话题识别与跟踪研究[J];计算机工程与应用;2003年17期
5 张伟;廖晓峰;吴中福;;一种基于遗传算法的聚类新方法[J];计算机科学;2002年06期
6 李飞;薛彬;黄亚楼;;初始中心优化的K-Means聚类算法[J];计算机科学;2002年07期
7 李晓黎,刘继敏,史忠植;基于支持向量机与无监督聚类相结合的中文网页分类器[J];计算机学报;2001年01期
8 张莉,周伟达,焦李成;核聚类算法[J];计算机学报;2002年06期
9 苏中,马少平,杨强,张宏江;基于Web-Log Mining的Web文档聚类[J];软件学报;2002年01期
10 佘绍敏;互联网信息流通中的政府控制[J];新闻与传播研究;2000年04期
【相似文献】
中国期刊全文数据库 前10条
1 于广生,刘广声;试论“导向正确引导有效”[J];当代传播;1997年06期
2 ;地方应对网络舆情能力榜:山西疫苗应对失当[J];新闻实践;2010年05期
3 郝英杰;马海红;彭军林;;高校网络舆情形成规律分析[J];北京教育(德育);2010年06期
4 程曼丽;;网络舆情研判——政府面临的新课题[J];新闻与写作;2010年11期
5 沈昕;凌宏彬;;试论舆情的权变管理[J];国际新闻界;2011年04期
6 ;典型示范 热点疏导 为企业改革攻坚提供舆情支持[J];新闻战线;1999年02期
7 王威;;创新新媒体时代的舆情管理体系[J];新闻爱好者(理论版);2008年12期
8 ;人大工作应重视网络舆情[J];上海人大月刊;2009年01期
9 曾润喜;陈强;赵峰;;网络舆情在服务型政府建设中的影响与作用[J];图书情报工作;2010年13期
10 贾孟飞;;基层网络舆情监测工作的实践与思考[J];银行家;2010年12期
中国重要会议论文全文数据库 前10条
1 曾华艺;;网络舆情危机事件指标体系探讨[A];信息化、工业化融合与服务创新——第十三届计算机模拟与信息技术学术会议论文集[C];2011年
2 郝文江;马晓明;武捷;;网络舆情现状分析与引导机制研究[A];全国计算机安全学术交流会论文集·第二十五卷[C];2010年
3 耿骞;刘颖;;网络舆情的形成、传播及监测方法[A];科学发展:文化软实力与民族复兴——纪念中华人民共和国成立60周年论文集(下卷)[C];2009年
4 任铭;陈俊鑫;;我国网络舆情及管理策略研究[A];2011年全国通信安全学术会议论文集[C];2011年
5 潘庆芳;周萍;;涉路网络舆情的现状及应对建议[A];中国公路学会高速公路运营管理分会2011年度年会暨第十八次全国高速公路运营管理工作研讨会论文集[C];2011年
6 冯希莹;;舆情概念辨析[A];2011年中国社会学年会——“社会稳定与社会管理机制创新”论坛论文集[C];2011年
7 刘为民;;网“客”传播和公安“舆情”[A];现代化的机遇与挑战——第八期中国现代化研究论坛论文集[C];2010年
8 何顺兰;王兴起;胡宏宇;姜明;;多媒体舆情分析系统设计与研究[A];浙江省电子学会2010学术年会论文集[C];2010年
9 杨江;侯敏;;语言文字舆情论略[A];中国传媒大学第四届全国新闻学与传播学博士生学术研讨会论文集[C];2010年
10 孙德超;张馨睿;贺晶晶;;地方政府网络舆情应对能力的提升[A];吉林省行政管理学会“政府管理创新与转变经济发展方式”学术年会论文集(《吉林政报》2010·专刊2)[C];2011年
中国重要报纸全文数据库 前10条
1 记者 姜澎;提前预警比事后“灭火”更重要[N];文汇报;2010年
2 孙愫、媛媛;中宣部舆情局领导来我市参观考察[N];唐山劳动日报;2010年
3 临县宣传部 李玉峰;浅谈舆情信息写作[N];吕梁日报;2011年
4 记者 邹雄;研究网络舆情的调查回应工作[N];柴达木日报;2011年
5 记者 李高阳;国企承受负面舆情压力大[N];第一财经日报;2011年
6 记者 郝勇;妇女舆情信息直报点制年内建[N];四川日报;2011年
7 郑言;人民网副总裁陈智霞:资本市场舆情监测已成朝阳行业[N];证券时报;2011年
8 南方日报记者 赵新星;舆情和微博问政报告 舆情汹涌,政府怎么办?[N];南方日报;2011年
9 陈婕;《环保舆情》成有力助手[N];中国环境报;2011年
10 兰州大学图书馆馆长、教授 沙勇忠;重视网络舆情的监测与导控[N];民主协商报;2011年
中国博士学位论文全文数据库 前10条
1 王根生;面向群体极化的网络舆情演化研究[D];江西财经大学;2011年
2 潘新;基于复杂网络的舆情传播模型研究[D];大连理工大学;2010年
3 刘玉国;基于内容的互联网舆情信息挖掘关键技术研究[D];山东大学;2011年
4 万源;基于语义统计分析的网络舆情挖掘技术研究[D];武汉理工大学;2012年
5 郑路;群体极化中的网络谣言传播研究[D];江西财经大学;2011年
6 王宇德;海量存储系统中数据分布化及其关键技术的研究[D];华中科技大学;2010年
7 王宇德;海量存储系统中数据分布进化及其关键技术的研究[D];华中科技大学;2010年
8 张一文;突发性公共危机事件与网络舆情作用机制研究[D];北京邮电大学;2012年
9 巫旭敏;分布式服务系统基于分层的存储资源管理研究[D];中国科学技术大学;2012年
10 舒畅;改进视频点播负载能力的模型与算法研究[D];华南理工大学;2012年
中国硕士学位论文全文数据库 前10条
1 高晔;高校网络舆情管理对策研究[D];上海交通大学;2010年
2 巨慧慧;针对网络舆情的情感倾向性研究[D];哈尔滨工业大学;2010年
3 项斌;网络舆情监测系统设计与实现[D];电子科技大学;2010年
4 赵若尘;高校校园网络舆情引导研究[D];西南大学;2010年
5 殷婷;网络舆情逆转研究[D];河北大学;2010年
6 陈华;危机管理视角下的公安网络舆情应对研究[D];复旦大学;2010年
7 罗引;互联网舆情发现与观点挖掘技术研究[D];电子科技大学;2010年
8 林艳;网络舆情突发事件的应急管理研究[D];郑州大学;2010年
9 王培顺;互联网教育舆情监测系统的设计与实现[D];华中师范大学;2011年
10 张岚岚;新浪微博的网络舆情分析研究[D];华东师范大学;2011年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026