美文网首页爬不动的毛毛虫
安装scrapyd-client解决后期爬虫部署上线,打包成eg

安装scrapyd-client解决后期爬虫部署上线,打包成eg

作者: 微凉_半夏 | 来源:发表于2018-07-19 19:03 被阅读1320次

1.安装依赖库:

pip install scrapyd-client

2.验证是否成功

任意doc窗口打开
运行: scrapyd-deploy -h

如出现下图则证明成功:


1.png

错误处理:

报错: 'scrapyd-deploy' 不是内部或外部命令,也不是可运行的程序或批处理文件

解决:

1.进入自己电脑安装python 的位置,找到Scripts文件夹,进入
2.创建文件 scrapy.bat
利用文本编辑器打开,添加内容:(注:拷贝粘贴即可,将路径改成自己电脑的)

@echo off
C:\Users\Administrator\AppData\Local\Programs\Python\Python36\python.exe C:\Users\Administrator\AppData\Local\Programs\Python\Python36\Scripts\scrapy %*

3.创建文件 scrapyd-deploy.bat
利用文本编辑器打开,添加内容:(注:拷贝粘贴即可,将路径改成自己电脑的)

@echo off
C:\Users\Administrator\AppData\Local\Programs\Python\Python36\python.exe C:\Users\Administrator\AppData\Local\Programs\Python\Python36\Scripts\scrapyd-deploy %*

保存以上两个文件
然后运行 scrapyd-deploy -h即可

(注意:一定要指到自己的python.exe才行)

相关文章

网友评论

    本文标题:安装scrapyd-client解决后期爬虫部署上线,打包成eg

    本文链接:https://www.haomeiwen.com/subject/byfxmftx.html