scrapy处理ssl错误,failure.Failure错误异常 scrapy请求错误日志 requests请求错误日志 猜测可能是指纹问题,然后尝试curl_cffi处理指纹问题,结果如下: curl_cffi请求成功 解决办法 修改scrapy的中间件 在写的时候,我先去github去搜了一下,看看有没有已经完成的中间件,减少造轮子的次数,然后不出意外,就看到了https://github.com/tieyongjie/scrapy-f 爬虫 bgspider 2024-12-05 59 热度0评论