龙源期刊网 http://www.qikan.com.cn 基于大数据的大学生就业指导 作者：王昌林 来源：《现代职业教育·高职高专》2018年第05期 [摘 要] 大数据时代背景下，传统的就业指导显现出诸多弊端，利用大数据对当今就业形势进行分析显得尤其重要。 利用爬虫获取某招聘网站近些年相关就业数据，利用已有的数据进行处理分词聚类，确定各个领域的关键词，之后借助频率统计与决策树模型，对各个地区、不同的职业方向和岗位、不同学历带来的招聘优势之间的差距进行分析，为就业指导提供帮助。通过分析可以看出，IT行业为现在最热门的行业，技术领域也最有价值，北京、上海、广州、深圳四大城市依然是人才招聘最集中的地方，有工作经验与高学历的人会更受欢迎。通过基于大数据的分析与挖掘可以为在校大学生根据自身情况、需求、目标量体裁衣，提供一个更有价值的就业选择。 [关 键 词] 就业；人才； IT [中图分类号] G647 [文献标志码] A [文章编号] 2096-0603（2018）13-0234-02 一、前言与数据预处理 大数据时代背景下职业发展与就业教育存在的问题主要是传统的就业指导工作在新时期显得格格不入，与实际不相符合。就业需求呈现出多样化、个性化的特征[1]。新时期我国高校在开展就业指导工作的过程中，积极应用大数据技术已迫在眉睫，应能够转变传统模式，对大数据优势进行充分的利用[2]。 本文先利用爬虫获取某招聘网站近几年内的招聘信息，整理成表进行分析，由于网站的错误或爬虫的漏洞，获取到的信息有一定的空数据或异常值，我们首先进行数据的清洗与预处理。 （1）空数据，首先使用其他合理的有效记录值填充空白的职业大类（使用同一职业ID的其他有效记录值），如果没有合适的值代替，则直接去除。（2）异常值的处理，分析异常值，对出现异常值的数据直接剔除。（3）去重，分析发现有的公司在一天内多次发布同样信息，对间隔两天内信息完全相同的招聘数据，剔除掉一个，保留其中一个。（4）分析发现有些数据后面有括号等符号标注备注，并将其将备注部分去除。（5）利用平均值代替范围表示该公司工资。 二、热门行业、职位、地域分析 （一）热门行业分析 本文来源：https://www.wddqw.com/doc/4ef1c1088f9951e79b89680203d8ce2f01666551.html