美文网首页
爬虫(4-1 4-2)

爬虫(4-1 4-2)

作者: buaishengqi | 来源:发表于2018-07-03 22:21 被阅读248次

4-1 scrapy安装以及目录结构介绍
用过豆瓣源下载scrapy


1.jpg

2 将scrapy模板导入项目工程


1.jpg
1.jpg
1.jpg
1.jpg

4-2 pycharm 调试scrapy 执行流程

1.jpg

由于pycharm里没有scrapy的模板。不方便调试,所以我们在pycharm里写以个main函数
方便我们调试


1.jpg
1.jpg 1.jpg

这里的name和jobbole.py里的name是一致的。
注意:
将settings.py文件里的true改成false


1.jpg

可以打上断点,debug一下main文件


1.jpg

相关文章

网友评论

      本文标题:爬虫(4-1 4-2)

      本文链接:https://www.haomeiwen.com/subject/nhojuftx.html