基于51job网招聘信息的大数据分析系统详细设计.docx

基于51job网招聘信息的大数据分析系统的设计与实现

摘要

随着信息技术的高速发展，在日常生活中不论什么方面都涉及到了对数据的使用。但是数据的规模变得日益繁多,充斥在网络的各个角落；如果求职者对工作招聘方面的数据有需求的话会花费相对比较大的工作量去挖掘数据，并且经过困难的过程来分析比对不同维度数据才可能得到自己的结果，因此一个相关的大数据分析系统对于求职者能在很大程度上节约工作量，并能够帮助招聘公司节约成本。为了实现此目标，现在对51job前程无忧招聘网站进行研究。首先对51job网站的数据使用python爬虫代码进行数据采集然后存储到本地文本文件，接着将爬取的数据经过java编写