更新时间:2023-12-03 22:06:04
我仍需要几周的经验来解决您的问题,但我会尝试使用RetryMiddleware:
可能向重试代码添加302就足够了:
RETRY_HTTP_CODES Default: [500, 502, 503, 504, 408]
https://doc.scrapy.org/en/latest/topics/downloader-middleware.html#retry-http-codes
在使用deathbycaptcha服务处理Google reCAPTCHA v2时,如何控制SCRAPY中的请求流?