Scrapy 是一个用 Python 编写的快速、开源的 web 爬行框架，用于在基于 XPath 的选择器的帮助下从网页中提取数据。
Scrapy 于2008年6月26日首次发布，在 BSD 下获得许可，2015年6月发布了里程碑式的1.0。
1，构建和扩展大型爬行项目更加容易。
2，它有一个内置的机制称为选择器，用于从网站提取数据。
3，它异步处理请求，速度很快。
4，它自动调整爬行速度使用自动节流机制。
5，确保开发人员的可访问性。
Scrapy 是一个开源的，可以免费使用 web 爬行框架。
Scrapy 以 JSON、 CSV 和 XML 等格式生成提要导出。
Scrapy 内置支持通过 XPath 或 CSS 表达式从源中选择和提取数据。
Scrapy 基于爬虫，允许从网页中自动提取数据。
它是一个跨平台的应用程序框架(Windows、 Linux、 Mac OS 和 BSD)。
Scrapy 请求是异步调度和处理的。
Scrapy 附带了一个名为 Scrapyd 的内置服务，它允许使用 JSON Web 服务上传项目并控制爬行器。
它可以爬取任何网站，虽然该网站没有原始数据访问 API。
网友评论