58同城招聘网数据采集与分析.pdf

湖南商务职业技术学院毕业设计

目录

1引言1

1.1项目背景1

1.2开发环境与工具2

1.2.1Python简介2

1.2.2Jupyternotebook简介2

2需求分析3

2.1可行性需求分析3

2.2采集目标功能分析4

2.3关键技术分析5

2.3.1网络爬虫技术5

2.3.2文件存取技术5

2.3.3可视化技术6

3数据采集7

3.1采集页面分析7

3.2字段分析9

3.3编程实现10

4数据清洗与处理15

4.1数据清洗15

4.2数据储存16

4.3编程实现17

5数据统计与分析19

5.1数据准备19

5.2数据展示20

5.2.1依据学历进行统计20

5.2.2依据工作经验对岗位需求量进行统计与分析22

I

湖南商务职业技术学院毕业设计

5.2.3据招聘人数数进行统计和分析24

5.2.4依据岗位进行统计25

5.2.5依据薪资进行统计26

5.3综述28

6小结29

参考资料30

II

湖南商务职业技术学院毕业设计

58同城招聘网数据采集与分析

1引言

招聘犹如一座指引航船前进的灯塔，指引着企业和个人在茫茫人海中寻找

匹配的伙伴，企业和个人的选择是双向的，企业发布招聘信息展现自己的实力

和发展前景希望能吸引志同道合的同伴，而求职者带着自己的才华，怀揣的能

力和梦想寻找自己的舞台。工作时间占据人们大部分时间，寻找一个适合自己

工作成为人们苦恼的一个难题。随着时代的发展，现在互联网已经非常普遍，

信息技术也在飞速发展，58同城作为国内领先的综合性生活服务平台，逐渐成

为人们寻找工作的主要途径，人们再也不会盲目的去寻找工作地点应聘岗位，

可以在招聘网站上有哪些信誉好的足球投注网站你想要应聘的行业，网站会根据你输入的信息给你推荐

公司，网络招聘为广大求职者和招聘者提供最便捷、高效、全面的招聘信息，

对于招聘者和企业而言具有参考价值，还可及减少成本支出。

医疗、餐饮、销售、服务业、互联网等新型行业不断涌现，而他们产生的

大量招聘数据等待开发的价值越来越大，我们需要对这些数据进行采集和分析。

通过对58同城招聘网站数据采集和分析，有助于我们了解互联网深信这一类招

聘当前人才市场的趋势和需求，以及了解不同的职位的薪酬水平、求职者教育

背景、工作经验、技能等特点，此外这些数据可以为招聘网站的决策者提供有

力的数据支持，帮助企业制定具有竞争力优化招聘策略减少成本，预测人才流

失风险，合理配置人力资源，提高用人效能。因此，对58同城招聘网站的数据

采集与分析有重大意义。

1.1项目背景

临近毕业季，大批毕业生将面临寻找适合工作的困惑。公司为引进新型人

才，将招聘信息放到网上，供求职者选择。对于求职者而言，地址、薪资、职

位要求等因素都会成为他们选择这份职业的决定性因素。那么，我们就需要获

取这份数据。涉及招聘信息有很多，我们需要对网页进行解析。然后通过python

爬虫的手段批量获取我们需要的数据。