scrapy处理ssl错误,failure.Failure

错误异常 scrapy请求错误日志 ​ requests请求错误日志 ​ 猜测可能是指纹问题,然后尝试curl_cffi处理指纹问题,结果如下: curl_cffi请求成功 ​ 解决办法 修改scrapy的中间件 在写的时候,我先去github去搜了一下,看看有没有已经完成的中间件,减少造轮子的次数,然后不出意外,就看到了https://github.com/tieyongjie/scrapy-f