美文网首页
Scrapy命令行操作

Scrapy命令行操作

作者: 想飞的大兔子 | 来源:发表于2018-05-22 16:03 被阅读0次

    创建Scarpy项目create

    scrapy startproject myproject [project_dir]

    生成爬虫 genspider

    scrapy genspider 爬虫名字 目标链接
    
    显示可用模板
    scarpy genspider -l
    模板包括:basic crawl scvfeed xmlfeed
    爬虫模板的使用
    scrapy genspider -t crawl 目标链接
    

    启动爬虫(进入爬虫所在目录)

    scrapy crawl spider

    Check

    检查是否有错误
    scrapy ckeck -l spider
    

    list

    爬虫列表
    scrapy list
    

    相关文章

      网友评论

          本文标题:Scrapy命令行操作

          本文链接:https://www.haomeiwen.com/subject/gxtkjftx.html