scrapy遇到403 500 502等状态码时的应对

2019-04-14  本文已影响0人  是东东

遇到错误忽略掉不重新请求,则设成[]

RETRY_HTTP_CODES = []

RETRY_HTTP_CODES = [500, 502, 503, 504, 400, 403, 404, 408]

上一篇 下一篇

猜你喜欢

热点阅读