收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于大数据的蔬菜水果价格信息监测分析系统研究

杨亚飞  
【摘要】:目前,我国农业生产存在农产品生产和市场脱节的严重问题,这主要是由农业决策者只凭臆测或使用决策精度不高的决策系统进行决策生产造成的。本文基于大数据以价格信息为主体,结合影响农产品价格的天气、产量等因素对农产品的价格影响因素、价格预测、区域分布、合理分配等内容进行了探讨,旨在寻找更适合我国农业生产决策的大数据分析处理流程,用大数据来尽可能提高农业生产决策的精度。本文依据现有大数据技术方法设计了价格信息监测分析流程,应用网络爬虫工具爬取各个农业网站上的农产品价格、产量等相关数据,并使用大数据思维对我国农产品价格等数据进行了分析处理。对原型系统进行设计,主要考虑传统技术在海量数据面前的局限性,应用了大数据相关技术克服了传统技术在海量数据存储与计算方面的不足。本文构建的大数据分析流程多采用开源架构实现,其中大数据采集选用了爬虫技术,大数据平台选用Hadoop。以HDFS、HBase和Hive作为存储系统,计算框架使用了MapReduce并行计算框架,并综合使用了包括Sqoop、Oozie、Elasticsearch等的技术来实现关系数据库到大数据平台的数据导入导出、自动化的数据采集存储流程以及建立全文索引。网络数据大多为文本类型的数据,需要对其数据进行结构化以方便后期的处理。首先,各农业网站的农产品和批发市场信息命名标准和规范都不一样,必须对其进行重新规范化。其次,各农业网站上的数据粒度不一样,需要对数据进行标准化。应用该大数据分析流程对蔬菜价格开展影响因素、价格趋势预测、空间区域特征以及分配方法分析。利用蔬菜价格影响因素分析获得影响价格的影响因素并抽取了具有代表性的天气、人均收入和喜好影响因素。然后利用这些影响因素构建了比较适合大数据场景的蔬菜价格预测分析流程。最后,利用该流程进行蔬菜价格趋势预测分析得到蔬菜的价格预测信息。利用空间位置信息进行蔬菜价格空间分布差异分析得出蔬菜的分配原点,再综合用户的喜好、区域性的需求和产量信息进行蔬菜配送方案分析得到分配的决策信息。利用大数据技术设计实现的农产品价格信息监测分析原型的正常运行证明了本文设计实现大数据分析流程可行。经过验证,利用该原型分析的结果比较切合实际,分析结果可信。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 赵君;;河南:榴莲价格上涨 富士苹果价跌[J];农产品市场周刊;2017年08期
2 赵君;;河南:水果价格整体小降[J];农产品市场周刊;2017年10期
3 禾本;;波兰:莓类水果价格提升明显[J];中国果业信息;2017年08期
4 赵玉山;;山西·冷冻天气过后水果价格略涨[J];中国果业信息;2016年02期
5 袁亚祥;;上海·春夏之交水果价格攀升[J];中国果业信息;2015年05期
6 万邦;;河南:水果价格上涨[J];农产品市场周刊;2014年05期
7 葛德光;;安徽·水果价格高位运行[J];中国果业信息;2014年03期
8 郑淑娟;;2012年5月巴基斯坦水果价格上涨[J];世界热带农业信息;2012年07期
9 李昕;;今年水果价格仍将坚挺[J];农村百事通;2007年03期
10 ;三季度水果价格总体高于去年[J];果农之友;2006年12期
11 ;泰国水果价格下降[J];世界热带农业信息;2005年08期
12 ;水果价格将上涨[J];农家顾问;2004年06期
13 ;加强销地水果价格管理[J];价格理论与实践;1988年02期
14 吴松旭;;节前水果价格见涨[J];农产品市场周刊;2009年38期
15 蓝建中;;日本六次产业化[J];农产品市场周刊;2011年03期
16 ;成本增加居高不下 部分水果价格上升[J];农产品市场周刊;2006年18期
17 北青;;北京 蔬菜水果价格上涨三成[J];农产品市场周刊;2006年43期
18 于明浩;;水果价涨 品种更新[J];农家致富;2006年01期
19 ;成都水果价格低迷[J];柑桔与亚热带果树信息;2000年03期
20 ;3月份以来全国水果价格涨势明显[J];烟台果树;2014年03期
中国重要会议论文全文数据库 前1条
1 赵俊晔;张峭;;我国水果市场价格风险闽值研究[A];风险分析和危机反应中的信息技术--中国灾害防御协会风险分析专业委员会第六届年会论文集[C];2014年
中国博士学位论文全文数据库 前1条
1 胡友;水果价格形成、波动及调控政策研究[D];华中农业大学;2014年
中国硕士学位论文全文数据库 前7条
1 杨亚飞;基于大数据的蔬菜水果价格信息监测分析系统研究[D];长江大学;2018年
2 向玉林;我国水果价格波动特征、规律及影响因素研究[D];华中农业大学;2015年
3 李俊青;水果市场价格预测与波动预警研究[D];华中农业大学;2015年
4 孙燕;重庆果农适用的果业信息手机查询平台研究[D];西南大学;2011年
5 任伟宏;基于人工神经网络的水果价格短期预测研究[D];中国农业科学院;2012年
6 宁静;山西省水果价格波动及其影响因素研究[D];山西农业大学;2016年
7 段毅;生鲜水果价格形成机制研究[D];山西农业大学;2014年
中国重要报纸全文数据库 前10条
1 记者 李玉娇;5月份 我市水果价格下跌[N];海东时报;2018年
2 本报记者 张南燕;水果价格稳定销量上涨[N];国际商报;2017年
3 本报记者 张利静;春节落幕果业迷惘 谁来清理“三农”服务死角[N];中国证券报;2017年
4 记者 刘叶琳;果蔬价格涨跌不一[N];国际商报;2017年
5 本报记者 刘叶琳;水果价格涨声一片[N];国际商报;2017年
6 记者 林侃 潘园园 通讯员 程飞;4月我省居民消费价格总水平同比上涨0.8%[N];福建日报;2017年
7 记者 李玉娇;6月我市水果价格下跌[N];海东时报;2017年
8 YMG记者 徐睿 通讯员 马丽娜;7月水果价格明显下降[N];烟台日报;2017年
9 记者 魏桥;广西香蕉集中上市 价格持续走低[N];新农村商报;2017年
10 经济报记者 张韩虹;9月份江苏居民消费价格同比上涨1.7%[N];江苏经济报;2017年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978