美文网首页
创建爬虫项目

创建爬虫项目

作者: 没有车胎的战车 | 来源:发表于2017-10-31 19:31 被阅读0次

在你开始爬取网站之前，你得先建立一个Scrapy项目。在命令行中输入你要建立项目和存放代码的路径(cd C:/project/filepath)，然后运行：

    >Scrapy startproject tutorial

这将会建立一个tutorial项目，而文件树如下图：

  • tutoral/

    • scrapy.cfg #部署配置文件

    • tutorial/ #项目的Python模块，你将会从这导入的的代码模块

      • __init__.py #初始化文件
      • items.py #定义项目的文件
      • pipelines.py #项目的管道文件
      • setting.py #项目设置文件
      • spider/ #存放爬虫的文件夹
        • __init__.py

相关文章

网友评论

      本文标题：创建爬虫项目

      本文链接：https://www.haomeiwen.com/subject/axvkuxtx.html

      延伸阅读

      深度阅读

      • 您也可以注册成为美文阅读网的作者，发表您的原创作品、分享您的心情！

      栏目导航

      热点阅读

      关于我们|服务条款|联系我们|创建爬虫项目|投稿指南|网站地图|RSS订阅|排版工具|手机版

      提供经典美文摘抄,优美散文欣赏,现代诗歌精选,短篇小说,心情随笔,表白情书范文,故事会在线阅读欣赏

      Copyright © 2014-2023 Haomeiwen.com All Rights Reserved. 好美文阅读网 版权所有

      备案信息：桂公网安备 45052102000051号 · 桂ICP备13007215号-3

      本站所收录作品、热点评论等信息部分来源互联网，目的只是为了系统归纳学习和传递资讯

      所有作品版权归原创作者所有，与本站立场无关，如不慎侵犯了你的权益，请联系我们告知，我们将做删除处理！