基于网络爬虫的招聘信息可视化分析系统.pdf

基于网络爬虫的招聘信息可视化分析系统 摘要：随着信息化时代的降临，当今世界信息化水平也越来越高。越来越多的招聘信息在网络上发 布，这就使得应聘者在眼花缭乱的招聘信息中不知如何选择最适合自己的工作。因此需要对这些海量的 招聘信息进行更深入的更高层次的分析。系统通过网络爬虫技术对网络上海量的招聘信息进行爬取，并 对其进行相关的数据清洗工作，对清洗后的数据进行可视化分析。实现了对爬取到的招聘信息进行分类 查看、模糊查询以及多条件联合查询，按关键字对招聘信息进行爬取等功能。随着大数据分析技术日渐 成熟，可以在合理的时间内对海量的数据进行管理、整理以及分析，从而发掘出数据之间隐藏的关联规 则以及预 未来的发展趋势。 关键词：招聘信息；数据可视化分析；网络爬虫 随着大数据的相关知识在这个时代越来越普及，我们这个时代即将迎来大数据的黄金 时期，大数据已经有着越来越重要的战略意义 。对于招聘信息而言，每天都会有海量的 [1] 招聘信息发布在网络上，在不同的网站上有着各种不同的招聘信息，然而数据库只能满足 对这些数据的增加、修改、删除、查询等简单的功能，这些简单的功能无法深层次的发掘 这些数据源的潜在价值，发挥数据源应有的效益 。应聘者往往希望找到最适合自己的工 [2] 作，诸如介于工作地点，工作报酬，工作经验，以及学历的要求，导致应聘者很难从海量 的招聘信息中获取到最适合自己的工作信息 。大数据分析技术可实现高度自动化的对数 [3] 据进行分析，发掘数据中隐含的、未知的、潜在的趋势和模型，有助于发现业务的趋势， 控制风险 。因此。对于招聘信息大数据的可视化分析是有其可行性的，通过对招聘信息 [4] 的可视化分析有利于应聘者发现最适合自己的工作。因此本项目开发了一款招聘信息可视 化分析系统。 因此对于招聘信息大数据的可视化分析是有其可行性的，通过对招聘信息的可视化分 析有利于应聘者发现最适合自己的工作。因此本项目开发了一款招聘信息可视化分析系统。 在实际的运行中规避风险，帮助数据分析这作出合理的决策，从而实现效益的最大 。 [5] 1 系统简介 基于网络爬虫的招聘信息可视化分析系统基于 B/S 架构，整个系统可以分为数据爬取 模块、数据可视化分析模块、用户功能模块三大模块。 功能结构图如图 1 所示。 招聘信息可视化分析系统 数据爬取 数据分析 爬 对 查 查 按 爬 取 招 看 看 关 取 前 聘 可 与 键 智 程 信 字 联 无 息 视 检 爬 化 索 招 忧 可 取 聘 招 视 分 招 招 信 聘 化 析 聘 聘 息 信 分 结 信 信