美文网首页
scrapy常用配置项

scrapy常用配置项

作者: 疏花 | 来源:发表于2018-08-22 18:10 被阅读10次
    1. HTTPERROR_ALLOWED_CODES
      默认: []
      允许该列表中所有非200状态码的response,也可以在spider中配置handle_httpstatus_list = [400, 500...]
      使用场景:捕获异常状态码并做相应处理。

    相关文章

      网友评论

          本文标题:scrapy常用配置项

          本文链接:https://www.haomeiwen.com/subject/uowyiftx.html