美文网首页
python爬虫——使用内置的urllib模块进行

python爬虫——使用内置的urllib模块进行

作者: Benny_浩 | 来源:发表于2017-11-05 16:57 被阅读23次

    使用环境:win7;python3
    参考教材来自FishC.com

    urllib.png

    urllib一共四个模块,通过urllib.request.urlopen()函数就可以访问网站了。

    实例一:下载单张图片的网站

    Paste_Image.png

    运行程序以后下载到桌面


    snake.png

    有时遇到图片较大的时候容易出错,这个时候需要缓存的帮助

    图片.png

    官方推荐的方法是:

    图片.png

    多进程

    图片.png 图片.png

    实例二:爬百度翻译结果

    这是post提交的内容


    Paste_Image.png

    相关文章

      网友评论

          本文标题:python爬虫——使用内置的urllib模块进行

          本文链接:https://www.haomeiwen.com/subject/umkzottx.html