requests是python实现的简单易用的HTTP库,使用起来比urllib简洁很多
因为是第三方库,所以使用前需要cmd安装
pip install requests
如果你的网速不好,为了加速,可以从国内镜像下载。如果你用的是公司或者学校内部的网络,可以设置代理
pip install requests -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com --proxy 87.254.212.121:8080
下面文章讲requests的用法,非常详细,我就不再搬运过来了。
https://www.cnblogs.com/mzc1997/p/7813801.html
下面是我用python爬取了杭州透明售房网的二手房挂牌数据(网站上首页就有当天的数据,不知道在网站如何查看历史数据,知道的小伙伴们麻烦告知。)
2019-04-25:73673
代码地址:
https://github.com/mayue615/learningPython/blob/master/catch_house_data.py
网友评论