【大数据分析分享系列】商品信息数据分析和展现系统的设计和开发.pdfVIP

【大数据分析分享系列】 之商品信息数据分析及展现系统的设计与开发 基于数据挖掘技术的智能化数据分析系统设计与开发 潍坊物价信息数据分析及展现 目录 背景： 1 实现过程： 1 一、数据获取2 数据来源：2 获取方式：2 1.使用Excel 工具抓取2 2.使用RCurl 爬虫2 二、数据展现3 展现方式：3 展现内容：3 1 ． 价格分析3 ① 价格走势：3 I ② 价格对比：3 ③ 全国商品价格4 2.居民消费指数6 ① 同比环比6 ② CPI 比例7 ③ 各省月度CPI 8 3. 商品流通情况9 4.各农作物主要产地 10 5.价格预测 11 三、数据预测 12 不足与展望： 19 II 背景： 商品价格和人们生活息息相关，比如农产品价格波动不仅会对农民收入和农 民生产积极性产生直接影响，更关乎百姓的日常生活和切身利益。经常看新闻看 到农民辛苦了一个季度的农作物全都烂在地里，因为价格太低廉，或者没有销路。 虽然说物价波动是一种正常的经济现象，但是在一定程度上物价稳，人心才稳， 社会才稳。为保持经济平稳健康发展、保障群众生活，稳定物价，信息公开显得 尤为重要。价格监测和预测是维持物价稳定的一个重要环节。而对于商品价格、 产量、以及销路、销量等数据公开，建立产品价格分析、监测、预测平台可以为 相关政府管理部门提供生产调控、决策分析的依据，成为农门种植的依据，避免 盲目种植。国家也有譬如南菜北运、西果东送等等政策但是数据实时公开，友好 的向全国人民展示我认为还有很大的提升空间。 实现过程： 针对从价格信息网抓取来的数据利用 eclipse 工作平台开发出了商品信息 数据分析及展现系统，实现了价格展示、价格分析、价格预测、居民消费指数分 析、商品流通情况以及作物主要产地及产量的展示。价格分析包括价格走势、价 格对比（市场之间对比）、价格展示（各省对比）。价格预测最后采用基于时间序 列的神经网络算法做了初步短期价格预测。居民消费指数CPI 作为反映消费者支 付商品和劳务的价格变化情况，也是一种度量通货膨胀水平的工具，主要包括同 比环比及其涨跌情况、CPI 构成比例以及各省月度CPI 展示等。 分析结果以带有时间轴的折线图、柱状图、地图热力图、饼状图形式展示， 界面美观，和用户交互性强，简单易懂。 1 一、数据获取 数据来源： 潍坊物价信息网；中华人民共和国国家统计局 获取方式： 针对数据来源网站信息大多有规律的更新，但网页数据结构保持不变，使用 的方式有两种： 1.使用Excel 工具抓取 1)通过Excel 从网页导入数据，选中自己要导入的数据。 2)新建宏，重复上步操作 3)观察数据发布的网页地址规律，修改宏代码 （使用该方法的好处是可用Excel 对获取来的数据进行数据处理） 2.使用RCurl 爬虫 （方便对抓回来的数据用R 直接对数据进行相关分析计算） 数据处理： 因为各种原因，价格信息网提供的商品价格信息有