美文网首页
scrapy实战

scrapy实战

作者: 李永开 | 来源:发表于2020-07-12 23:13 被阅读0次

    一.scrapy

    1. scrapy是一个爬虫框架
    2. 使用python3安装pip3 install scrapy
    3. 如果你使用的事brew安装的python3,那么直接在命令行是敲不出scrapy的.
      解决办法,创建一个软连接/usr/local/Cellar/python/3.7.7/Frameworks/Python.framework/Versions/3.7/bin/scrapy /usr/local/bin/scrapy将brew下面的python的scrpy在/usr/local/bin映射一个

    二.开始爬虫

    1.scrapy startproject meizitu新建一个工程
    2.scrapy genspider mztSpider https://www.meizitu.com创建爬虫
    3.scrapy crawl mztSpider运行爬虫

    相关文章

      网友评论

          本文标题:scrapy实战

          本文链接:https://www.haomeiwen.com/subject/gjrncktx.html