• linkedu视频
  • 平面设计
  • 电脑入门
  • 操作系统
  • 办公应用
  • 电脑硬件
  • 动画设计
  • 3D设计
  • 网页设计
  • CAD设计
  • 影音处理
  • 数据库
  • 程序设计
  • 认证考试
  • 信息管理
  • 信息安全
菜单
linkedu.com
  • 网页制作
  • 数据库
  • 程序设计
  • 操作系统
  • CMS教程
  • 游戏攻略
  • 脚本语言
  • 平面设计
  • 软件教程
  • 网络安全
  • 电脑知识
  • 服务器
  • 视频教程
  • JavaScript
  • ASP.NET
  • PHP
  • 正则表达式
  • AJAX
  • JSP
  • ASP
  • Flex
  • XML
  • 编程技巧
  • Android
  • swift
  • C#教程
  • vb
  • vb.net
  • C语言
  • Java
  • Delphi
  • 易语言
  • vc/mfc
  • 嵌入式开发
  • 游戏开发
  • ios
  • 编程问答
  • 汇编语言
  • 微信小程序
  • 数据结构
  • OpenGL
  • 架构设计
  • qt
  • 微信公众号
您的位置:首页 > 程序设计 >编程问答 > scrapy如何处理验证码?

scrapy如何处理验证码?

作者:佚名 字体:[增加 减小] 来源:互联网 时间:2017-06-07

佚名通过本文主要向大家介绍了python scrapy,scrapy爬虫,scrapy,scrapy安装,scrapy教程等相关知识,希望对您有所帮助,也希望大家支持linkedu.com www.linkedu.com
问题:scrapy如何处理验证码?
描述:

对于 scrapy 中验证码怎么处理?(比如说登录知乎,现在需要验证码)
我的想法是通过 scrapy 把验证码下载下来,手动打码方式。
那么问题来了, scrapy 如何保持同一个 session 去下载验证码呢?

因为我之前用 requests 登录知乎 https://gist.github.com/Xarrow/69b971521f807924db77 ,保持一个 session ,下载验证码图片,在用这个 session 登录,可以成功。
我的想法是在 scrapy 中先用 requests 登录完,把 session 传给 scrapy 中的 cookiejar:requests.session(),
请问这样做可以么?或者有更好的方法么?
求大神给出示例~


解决方案1:

我刚好也遇到这个问题,请求验证码时也用scrapy的Request就可以成功。刚好也在学习爬知乎,大家交流下~


分享到:QQ空间新浪微博腾讯微博微信百度贴吧QQ好友复制网址打印

您可能想查找下面的文章:

  • (python)scrapy中使用CrawlSpider,匹配不到urls
  • scrapy解析页面是串行还是并行?
  • (python)关于Scrapy中TwistedPipline报错
  • scrapy可以获得各个环节所用的时间吗
  • (python)使用scrapy的时候,循环为什么只能获取第一页的
  • (python)Scrapy模拟登陆遇到404问题
  • dnf喇叭怎么重复scrapy怎么实现重复或者定时采集
  • scrapy的headerauthorization
  • python爬虫(python)scrapy爬虫不能循环运行?
  • (python)在编写scrapy爬虫的时候rules中allow的书写问题

相关文章

  • 2017-06-07 寻址方式在结构化数据访问中的应用
  • 2017-06-07 Masm32自带的inc文件格式与VS汇编不兼容
  • 2017-06-07 使用了七牛云但是网站打开还是很慢,怎么办?
  • 2017-06-07 C++调用python,为什么读不出py文件里的方法
  • 2017-06-07 服务器用七牛上传图片时报错,相关包都添加了求大神帮忙
  • 2017-06-07 正则表达式exec一个神秘的小问题
  • 2017-06-07 怎么用php匹配出这段代码?
  • 2017-06-07 (laravel)composerrequire安装包之后,再更改其他代码都无效。
  • 2017-06-07 内容缓存问题
  • 2017-06-07 关于百度URL中关键词编码的研究

文章分类

  • JavaScript
  • ASP.NET
  • PHP
  • 正则表达式
  • AJAX
  • JSP
  • ASP
  • Flex
  • XML
  • 编程技巧
  • Android
  • swift
  • C#教程
  • vb
  • vb.net
  • C语言
  • Java
  • Delphi
  • 易语言
  • vc/mfc
  • 嵌入式开发
  • 游戏开发
  • ios
  • 编程问答
  • 汇编语言
  • 微信小程序
  • 数据结构
  • OpenGL
  • 架构设计
  • qt
  • 微信公众号

最近更新的内容

    • 新手求助:为什么这个for不能无限循环
    • python的pymongodbcollectionfind出来是个游标,怎么才能转成数据?
    • js正则如何匹配前后都无文字的空格?
    • vmwaretools安装vmware安装mac不能全屏
    • 谁有时间能给翻译一下,应该都是CCS的样式属性的中文名称,或者有什么网站有CSS属性的中英对照表也行。
    • python爬虫能模拟windowjs的是什么框架?
    • Python爬虫复杂度是如何进行计算的?
    • python里有没有类似于sysstdoutflush的函数来强制完成对文件的写入?
    • 天蝎座是几月几号到几月几号大神能不能普及一下这几个编程概念
    • 用flask通过网页表单去修改本地ini文件,每次重新进入网站,表单会被清空导致数据库也会被清空,请问下应该怎样处理这个表单的问题?!

关于我们 - 联系我们 - 免责声明 - 网站地图

©2020-2025 All Rights Reserved. linkedu.com 版权所有