美文网首页
python学习—week12

python学习—week12

作者: 大脸飞 | 来源:发表于2019-03-04 08:50 被阅读0次

week11总结:

1.给代理池增加了一个很简单的验证代理地址有效性的功能,把地址一个一个读出来,失效的删掉,然后删的只剩下两条了……结论:免费代理真不靠谱

2.利用代理地址对一个网站进行了爬取,整体设计是取出代理,失效的话更换地址,有效的话进行爬取,数据存储到mongoDB,每爬取一页换一个代理地址。

3.犯了一个很经典的错误:

刚开始except里只是调用了函数本身,没有return,这样就造成try可以正常返回值,但是一旦进入except,再调用函数本身得到的返回值后没有接收,因此得到的返回值是None。

week12任务:

学习手机app的爬取

相关文章

  • python学习—week12

    week11总结: 1.给代理池增加了一个很简单的验证代理地址有效性的功能,把地址一个一个读出来,失效的删掉,然后...

  • COMP9021 Principles of Programmi

    Week12 optional的lecture都是对week11的解释,前面都已经写过,所以没有week12 op...

  • week12

    week 5视频总结 效率和增长量级 程序运行耗费的时间和内存需要平衡Problem is that th...

  • Week12

    产品上了线,上线过程中失败了一个模块,修好了重修上一次,因此也交了一份总结。 周一大家开“项目总结检讨会”,讨论到...

  • week12

    工作:今年CEO说,不搞年度KPI了,开始搞OKR。这个星期突击弄好了第二季度的OKR。说来也很搞笑,2月份,CE...

  • 《Android》Lesson22-数据存储

    Week12 2016/12/1上午1-4节 一、复习 二、文件存储 存 1、openFileOutput(Con...

  • python学习笔记目录

    Python学习笔记目录(倒序) Python学习-异常 Python学习-面向对象 Python学习-文件系统 ...

  • 《HTML5实战》Lesson11

    Week12 2016/11/30上午1-4节 一、复习 二、使用地图 1、window.navigator 对象...

  • 『21/100』回顾,然后修正行动

    周复盘(Week12) — 好与坏部分 Baaaad: Sun 2019.3.24 肚子痛了,饮食上要注意,忌生...

  • 10.周记week12

    周#回顾 本周进度 本周Plan(week12 3.18-3.24) 1.等待体检通知 √ 2.等待体检结果、复检...

网友评论

      本文标题:python学习—week12

      本文链接:https://www.haomeiwen.com/subject/puxbuqtx.html