且构网

分享程序员开发的那些事...
且构网 - 分享程序员编程开发的那些事

在使用deathbycaptcha服务处理Google reCAPTCHA v2时,如何控制SCRAPY中的请求流?

更新时间:2023-12-03 22:06:04

我仍需要几周的经验来解决您的问题,但我会尝试使用RetryMiddleware:

可能向重试代码添加302就足够了:

RETRY_HTTP_CODES
Default: [500, 502, 503, 504, 408]

https://doc.scrapy.org/en/latest/topics/downloader-middleware.html#retry-http-codes