美文网首页
scrapy入门使用及pycharm远程调试

scrapy入门使用及pycharm远程调试

作者: haoxuan_xia | 来源:发表于2021-11-15 10:27 被阅读0次

一·scrapy的入门使用

  1. scrapy的安装
pip3 install scrapy
  1. 创建scrapy项目
scrapy startproject moviespider
  1. 创建scrapy爬虫：在项目目录下执行
scrapy genspider movie 163.com
  1. 运行scrapy爬虫：在项目目录下执行
scrapy crawl movie

# 如果不需要查看日志文件运行

scrapy crawl movie --nolog

二·PyCharm调试运行Scrapy项目

1.pycharm打开一个scrapy项目

  1. 找到scrapy包复制cmdline.py 到项目主目录（scrapy.cfg文件的同一目录下）

  2. 编辑文件调试运行配置


    image.png
    image.png
    20211115102449.png

  3. 也可以代码运行调试


    image.png

相关文章

网友评论

      本文标题：scrapy入门使用及pycharm远程调试

      本文链接：https://www.haomeiwen.com/subject/dvoftrtx.html

      延伸阅读

      深度阅读

      • 您也可以注册成为美文阅读网的作者，发表您的原创作品、分享您的心情！

      栏目导航

      热点阅读

      关于我们|服务条款|联系我们|scrapy入门使用及pycharm远程调试|投稿指南|网站地图|RSS订阅|排版工具|手机版

      提供经典美文摘抄,优美散文欣赏,现代诗歌精选,短篇小说,心情随笔,表白情书范文,故事会在线阅读欣赏

      Copyright © 2014-2023 Haomeiwen.com All Rights Reserved. 好美文阅读网 版权所有

      备案信息：桂公网安备 45052102000051号 · 桂ICP备13007215号-3

      本站所收录作品、热点评论等信息部分来源互联网，目的只是为了系统归纳学习和传递资讯

      所有作品版权归原创作者所有，与本站立场无关，如不慎侵犯了你的权益，请联系我们告知，我们将做删除处理！