收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于公共地图访问日志数据的城市热点与商圈探索分析

张雪涛  
【摘要】:改革开放后随着经济的高速增长,国内很多城市商圈无序扩张的现象日益严重。然而,当前对城市商圈的研究较少认识不足,不利于规划部门做出合理的指导。互联网技术的进步使得网络公共地图服务得到了快速普及。用户访问公共地图网站产生的日志数据因带有丰富的地理位置信息而使其成为众源地理数据的一种,对这种Web日志数据进行商圈相关挖掘具有研究应用价值。论文针对当前商圈度量方法时效性差,成本高,准确率不高等问题,提出一种基于公共地图访问数据的城市商圈度量方法。为了得到高质量的数据,论文选择Hadoop及相关组件作为数据预处理的基础框架,把原始数据存储在分布式文件系统(Hadoop Distributed File System,HDFS)中,使用ETL(Extract Transform Load)数据处理方法对数据进行抽取、清洗、转换。将ETL后的数据存储到HBase数据库中以供后续分析使用。针对转换后的访问位置数据量大且离散的问题,论文使用格网化方法将数据转化为具有空间连续性且能更好地反应访问事件集聚密度的格网数据。为了挖掘出隐含在数据中的热点区域和商圈空间分布模式,运用探索性空间数据分析方法对数据进行全局空间自相关检验,探索公共地图访问数据的空间分布模式。接着探索了研究区域的最优聚类距离并构造空间关系矩阵,使用局部空间自相关方法对热点区域进行探测。最后提取出商业类高值热点使用构造标准差椭圆的方法对城市商圈进行度量。为了选出合适的研究区域,统计各个城市的公共地图访问人数,发现各城市用户量符合Zipf分布。选择用户量较多的深圳市为本文研究,探测结果表明基于公共地图访问数据挖掘出的深圳市商圈分布与深圳市规划的商圈具有高度正相关性,可以为政府部门编制区域规划、企业经营管理提供服务。


知网文化
【相似文献】
中国期刊全文数据库 前17条
1 赵清刚;;《机务本段运转日志处理系统》易出现的问题分析及解决策略[J];太原铁道科技;2012年02期
2 张如云;;基于日志文件的数据挖掘机理分析与研究[J];微型机与应用;2015年18期
3 高晓琴;王亨桂;;基于粗糙集和模糊聚类的网站日志数据挖掘实例分析[J];绵阳师范学院学报;2009年05期
4 宋爱波,庄晓青,何洁月,业宁,董逸生;图书馆大规模日志数据的快速聚类[J];应用科学学报;2003年03期
5 冯瑶;秦洪岩;刘跃光;王智忠;;日志回放技术对铺底数据的关联性研究[J];中国金融电脑;2019年02期
6 毕红双;王宝生;张京京;;多源日志的远程存储和分析管理[J];信息通信;2016年03期
7 张琦琪;;有关日志数据预处理的研究[J];计算机与现代化;2007年04期
8 赵琳;;利用日志服务器管理校园网[J];网络安全和信息化;2019年04期
9 邓奇强;;高校图书馆流通日志数据整理探讨[J];河北科技图苑;2013年04期
10 古恒;陈钊;王枞;张思悦;傅群超;;双层聚类模型在日志数据分析中的应用[J];北京邮电大学学报;2015年S1期
11 彭骞;党引;李斌;;基于大数据技术的服务器日志采集分析方法[J];电力大数据;2017年08期
12 王志勃;毕艳茹;;基于分布式架构的煤矿企业日志数据分析设计与实现[J];煤炭技术;2014年03期
13 朱远燕;向帅钰;孙建伟;高春蓉;;基于日志数据的临床数据采集算法研究与原型实现[J];智慧健康;2015年02期
14 李慧;陈红倩;杨倩玉;陈谊;;一种针对日志数据流的实时可视化方法[J];系统仿真学报;2016年09期
15 田稷;挖掘高校图书馆Web日志数据库的意义和方法[J];情报理论与实践;2002年04期
16 刘合富;;SYSLOG日志数据采集实现[J];中国教育网络;2007年08期
17 陈晗阳;陈建兵;梁立;;网络日志数据的预处理技术研究[J];云南师范大学学报(自然科学版);2018年04期
中国重要会议论文全文数据库 前3条
1 刘锟;邢延;蔡延光;;一种针对交互式学习系统日志数据的轻型化挖掘方法[A];2011年中国智能自动化学术会议论文集(第一分册)[C];2011年
2 周维贵;冯增辉;周全;周波;;基于多维统计分析的网络故障预测方法研究[A];第十一届全国信号和智能信息处理与应用学术会议专刊[C];2017年
3 姬炳帅;李虎;韩伟红;贾焰;;面向电子商务的用户异常行为检测研究[A];第29次全国计算机安全学术交流会论文集[C];2014年
中国博士学位论文全文数据库 前1条
1 刘雪梅;服务器端软件性能分析和诊断方法研究[D];哈尔滨工程大学;2010年
中国硕士学位论文全文数据库 前10条
1 张雪涛;基于公共地图访问日志数据的城市热点与商圈探索分析[D];辽宁工程技术大学;2017年
2 易科;不完备日志的过程挖掘算法研究[D];华侨大学;2018年
3 刘致奇;基于多人角色扮演网络游戏日志数据的角色类别演化的分析与可视化[D];浙江大学;2017年
4 刘峰;基于海量网络日志数据的实时流处理系统的设计与实现[D];北京邮电大学;2017年
5 孙瑶;轨道交通日志数据存储挖掘子系统的设计与实现[D];北京邮电大学;2017年
6 杨林红;WebGIS日志数据挖掘预处理的研究与实现[D];电子科技大学;2011年
7 杨尚大;日志数据采集和实时审计关键技术研究与实现[D];浙江工商大学;2009年
8 苏政;基于日志数据的域名访问源多尺度分析[D];南京师范大学;2013年
9 陶兴宇;分布式系统日志数据采集关键技术研究与实现[D];沈阳航空航天大学;2016年
10 王高垒;爬虫日志数据信息抽取与统计系统设计与实现[D];北京邮电大学;2012年
中国重要报纸全文数据库 前9条
1 ;日志数据激增困扰数据中心[N];网络世界;2009年
2 曾;RSA发布enVision解决方案[N];电脑商报;2007年
3 沈建;谨防安全策略的五大基本错误[N];计算机世界;2008年
4 陈佳璐;向云计算迁移不得不考虑的问题[N];现代物流报;2014年
5 《网络世界》记者 鹿宁宁;安全互联搭台SIEM唱戏[N];网络世界;2013年
6 赛迪智库软件产业研究所 陈光;电信行业如何发展大数据应用[N];通信产业报;2016年
7 ;收购不停 科技企业进入“联姻”高峰期[N];计算机世界;2004年
8 ;数据科学家应具备四项能力[N];中国计算机报;2013年
9 IBM大数据专家 James Kobielus 范范 编译;大数据日志分析借机器学习腾飞[N];网络世界;2014年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978