美文网首页
python爬虫---爬取当天杭州二手房的信息

python爬虫---爬取当天杭州二手房的信息

作者: 我是月月老师 | 来源:发表于2019-04-25 15:24 被阅读0次

requests是python实现的简单易用的HTTP库,使用起来比urllib简洁很多

因为是第三方库,所以使用前需要cmd安装

pip install requests

如果你的网速不好,为了加速,可以从国内镜像下载。如果你用的是公司或者学校内部的网络,可以设置代理

pip install requests -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com --proxy 87.254.212.121:8080

下面文章讲requests的用法,非常详细,我就不再搬运过来了。

https://www.cnblogs.com/mzc1997/p/7813801.html

下面是我用python爬取了杭州透明售房网的二手房挂牌数据(网站上首页就有当天的数据,不知道在网站如何查看历史数据,知道的小伙伴们麻烦告知。)

2019-04-25:73673

代码地址:

https://github.com/mayue615/learningPython/blob/master/catch_house_data.py

相关文章

网友评论

      本文标题:python爬虫---爬取当天杭州二手房的信息

      本文链接:https://www.haomeiwen.com/subject/adlzgqtx.html