美文网首页python_爬虫
Python爬虫入门教程:爬取boss直聘招聘数据并做可视化展示

Python爬虫入门教程:爬取boss直聘招聘数据并做可视化展示

作者: 傻逼平台瞎几把封号 | 来源:发表于2021-10-20 14:56 被阅读0次

本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,如有问题请及时联系我们以作处理。

基本开发环境

  • Python 3.8

  • Pycharm

相关模块的使用

image

安装Python并添加到环境变量,pip安装需要的相关模块即可。

image

如图所示,通过 Python 来控制 Selenium,然后让 Selenium 控制浏览器,操纵浏览器,这样就实现了使用Python 间接的操控浏览器。

Selenium具体怎么就能操纵浏览器呢?这要归功于 浏览器驱动 ,Selenium可以通过API接口实现和浏览器驱动的交互,进而实现和浏览器的交互。所以要配置浏览器驱动。

本教材使用版本:

火狐驱动:geckodriver 0.23.0 ( 2018-10-04)

火狐驱动下载地址: http://npm.taobao.org/mirrors/geckodriver/

谷歌驱动:ChromeDriver 71.0.3578.33

谷歌驱动下载地址:

https://npm.taobao.org/mirrors/chromedriver/

http://chromedriver.storage.googleapis.com/index.html

配置浏览器驱动:

将下载好的浏览器驱动解压,将解压出的 exe 文件放到Python的安装目录下,也就是和python.exe同目录即可。

image

代码实现

image image

数据可视化

只是获取前10页的数据内容,总计是300条数据

每个地区的招聘数量

image

平均工资最高的地区

[图片上传失败...(image-16ae65-1634712562718)]

经验学历需求图

image

招聘公司所在领域

image

相关文章

网友评论

    本文标题:Python爬虫入门教程:爬取boss直聘招聘数据并做可视化展示

    本文链接:https://www.haomeiwen.com/subject/huptaltx.html