美文网首页
python爬取电影和美食数据实战

python爬取电影和美食数据实战

作者: af09b3c456ce | 来源:发表于2018-09-07 16:08 被阅读39次

    本文使用的是requests+正则来匹配网页内容,对于数据量较多的采用了多线程抓取的方法,共3个案例,分别是抓取猫眼电影TOP100榜单和淘票票正在热映的电影信息、以及美团的美食数据。这几个案例采用的方法大同小异。

       1、首先选择想要爬取的网站

       2、确定要用的模块,requests,json,re三个模块,如果想加快爬取速度可以加一个Pool

       3、 网页请求,先得到整个页面,需要加一个hea

    >>>阅读全文

    相关文章

      网友评论

          本文标题:python爬取电影和美食数据实战

          本文链接:https://www.haomeiwen.com/subject/lyvcgftx.html