美文网首页python爬虫机器学习与数据挖掘大数据 爬虫Python AI Sql
Python爬虫之抓取爱问知识人问题并保存至数据库

Python爬虫之抓取爱问知识人问题并保存至数据库

作者: EricChanThink | 来源:发表于2017-07-12 18:57 被阅读23次

    目的:

    抓取某类下面所有问题,并且获取所有答案

    思路:

    1,抓取某分类下面的所有问题

    2,根据问题里的链接进入所有答案页面

    3,抓取所有答案

    4,插入数据库

    环境:

    wamp+python3

    代码:

    https://github.com/chenxiang2017/spidersamples/tree/master/iask

    相关文章

      网友评论

        本文标题:Python爬虫之抓取爱问知识人问题并保存至数据库

        本文链接:https://www.haomeiwen.com/subject/jftihxtx.html