步骤一:首先你得安装了 docker
步骤二:找到你的项目路径 在终端输入 cd +项目路径
步骤三:找到docker安装相关插件
到docker目录下执行命令:docker-compose up scrapyd 创建项目爬虫环境及运行docker镜像
安装ing 安装成功第四步:进入docker
命令:docker-compose exec scrapy bash(执行bash程序)
第五步:找到要执行文件的目录
命令:cd spider (进入spider)
命令:scrapy crawl + 文件名
报错与升级:
镜像需要升级:
拓展:
中止爬取快捷键:control+cc 选中即复制 control+w 删除一个单词
(mac电脑,window请自行百度 哈哈)
网友评论