基于hadoop和mysql的天气分析系统.docx

班级 031201 学号本科毕业设计论文题目基于Hadoop的MapReduce 应用软件设计与实现学院计算机学院专业计算机科学与技术学生姓名尤鹤毕业设计（论文）诚信声明书本人声明：本人所提交的毕业论文《基于Hadoop的MapReduc应用软件设计与实现》是本人在指导教师指导下独立研究、写作的成果，论文中所引用他人的无论以何种方式发布的文字、研究成果，均在论文中加以说明；有关教师、同学和其他人员对本文的写作、修订提出过并为我在论文中加以采纳的意见、建议，均已在我的致谢辞中加以说明并深致谢意。本论文和资料若有不实之处，本人承担一切相关责任。论文作者：尤鹤（签字）时间：2016年6月1日指导教师已阅：赵老师（签字）时间：2016年6月13日摘要随着21世纪信息化时代的到来，随着科技的迅速发展，我们每时每刻都在这个世界中留下我们的足迹，这些足迹构成了日益增长的信息量。因此对这些大数据的存储和处理显得至关重要，天气信息的分析与查询就是一个很好的例子。本文针对这一问题，将阐述如何开发一款基于hadoop的MapReduce的天气分析系统。首先介绍了大数据时代的相关背景和为处理大数据而产生的相关工具，如Hbase。其次分析了打造一款基于hadoop天气分析系统的重要性和可行性。最后经过系统设计，开发环境搭建，系统实现和系统结果展现等部分完成了本系统的开发工作。整个系统界面简洁直观，使用方便，运行可靠，查询结果因图形展现的方式使数据之间对比明显，易于接受。关键字：大数据 Hadoop Hbase 天气分析AbstractWith the advent of the information age in 21st century, with the rapid development of science and technology, we all the time in the world to leave our footprints, these footprints constitute the growing amount of information. Therefore, the storage and processing of these big data is very important, the analysis of the weather information and query is a good example.Aiming at this problem, this paper will explain how to develop a weather analysis system based on MapReduce hadoop. First ,it introduced the background of the era of big data and related tools for the processing of large data, such as Hbase. Secondly, it analyzes the importance and feasibility of building a weather analysis system based on Hadoop. Finally,after the system design, development environment, system implementation and system results it shows that the system has completed the development of the work. The whole system interface is simple and intuitive, easy to use, reliable operation,and the results of the query results show the way to make the data between the obvious, easy to accept. Key words: big data Hbase Hadoop weather analysis 第一章绪论1.1开发背景1.1.1大数据时代介绍21世纪是一个互联网时代，一个信息化的时代。我们这一代人享受着科技发展所带来的好处，人们交流越来越密切，生活也越来越方便，大数据便是这一时代的产物。大数据具有以下特征：数据量大类型繁多价值密度低增长速度快，时效高放眼世界，现在各行各业每天都会产生大量的数据，而大量的数据给我们的技术发展带来了各种各样的难题，主