佚名通过本文主要向大家介绍了python scrapy,scrapy爬虫,scrapy,scrapy安装,scrapy教程等相关知识,希望对您有所帮助,也希望大家支持linkedu.com www.linkedu.com
问题:scrapy如何处理验证码?
描述:
解决方案1:
描述:
对于 scrapy 中验证码怎么处理?(比如说登录知乎,现在需要验证码)
我的想法是通过 scrapy 把验证码下载下来,手动打码方式。
那么问题来了, scrapy 如何保持同一个 session 去下载验证码呢?
因为我之前用 requests 登录知乎 https://gist.github.com/Xarrow/69b971521f807924db77 ,保持一个 session ,下载验证码图片,在用这个 session 登录,可以成功。
我的想法是在 scrapy 中先用 requests 登录完,把 session 传给 scrapy 中的 cookiejar:requests.session(),
请问这样做可以么?或者有更好的方法么?
求大神给出示例~
解决方案1:
我刚好也遇到这个问题,请求验证码时也用scrapy的Request就可以成功。刚好也在学习爬知乎,大家交流下~