用 POWER BI 爬取网上薪酬数据

在薪酬数据分析中，比较难的是获取行业的市场数据，然后拿公司内部的岗位和层级的中位值和行业数据进行数据对标，从而分析判断各个岗位的薪酬竞争力，我们在上篇的文章里讲到了如何免费去获取行业薪酬数据，如果没看的同学可以点击下面链接

HR年底必看 - 如何获取行业相关人效数据指标

在这篇文章中我们讲到可以通过招聘网站的薪酬数据，在累积到足够的数据量的时候，通过进行中位值的计算来获取行业数据。

但是有同学可能会问，手动去获取数据，如果要获取几百个那效率很低，有没有方法可以自动的获取数据。

在POWER BI 里对于数据的获取几乎包含了所有的数据途径，从常规的EXCEL到数据库到各网站的表格数据，都可以进行数据的获取和导入

那对于我们来说，我们需要从网站获取数据，就可以在POWER BI的获取数据里选择WEB 来进行网站数据的获取，比如我们下面这个网站，有各省城市工资的薪酬数据，我想直接获取导入到POWER BI来进行数据的建模。

如果手动的去获取数据，你需要选择数据，在EXCEL复制粘贴，再进行数据的清洗，在导入到POWER BI进行建模，非常麻烦，在POWER BI中可以直接获取导入这个网站的数据。

在POWER BI 的数据获取中，点击WEB，会出现一个URL ，网站链接

然后把网址输入，在导航器中就会出现这个网站中表格的数据预览，我们选择表一，在右侧就有这个表的数据

点击转换数据，就可以再POWER QUERY中对这个表的数据进行数据的清洗。更改表中的数据类型。

然后根据这些数据，就可以对数据进行数据建模和分析

通过这种网上的数据的获取导入，就可以自动的爬取数据，提升我们的工作效率。