• linkedu视频
  • 平面设计
  • 电脑入门
  • 操作系统
  • 办公应用
  • 电脑硬件
  • 动画设计
  • 3D设计
  • 网页设计
  • CAD设计
  • 影音处理
  • 数据库
  • 程序设计
  • 认证考试
  • 信息管理
  • 信息安全
菜单
linkedu.com
  • 网页制作
  • 数据库
  • 程序设计
  • 操作系统
  • CMS教程
  • 游戏攻略
  • 脚本语言
  • 平面设计
  • 软件教程
  • 网络安全
  • 电脑知识
  • 服务器
  • 视频教程
  • JavaScript
  • ASP.NET
  • PHP
  • 正则表达式
  • AJAX
  • JSP
  • ASP
  • Flex
  • XML
  • 编程技巧
  • Android
  • swift
  • C#教程
  • vb
  • vb.net
  • C语言
  • Java
  • Delphi
  • 易语言
  • vc/mfc
  • 嵌入式开发
  • 游戏开发
  • ios
  • 编程问答
  • 汇编语言
  • 微信小程序
  • 数据结构
  • OpenGL
  • 架构设计
  • qt
  • 微信公众号
您的位置:首页 > 程序设计 >编程问答 > scrapy为何抓不到某个标签下的属性?

scrapy为何抓不到某个标签下的属性?

作者:佚名 字体:[增加 减小] 来源:互联网 时间:2017-06-07

佚名通过本文主要向大家介绍了python scrapy,scrapy,scrapy爬虫,scrapy安装,scrapy教程等相关知识,希望对您有所帮助,也希望大家支持linkedu.com www.linkedu.com
问题:scrapy为何抓不到某个标签下的属性?
描述:

如图code标签下有class属性,能用浏览器看到。

使用scrapy shell默认的User-Agent就得不到class属性。

换了一个User-Agent也一样


解决方案1:

code的class属性是用js加上去的,当然读不到咯


分享到:QQ空间新浪微博腾讯微博微信百度贴吧QQ好友复制网址打印

您可能想查找下面的文章:

  • (python)scrapy中使用CrawlSpider,匹配不到urls
  • scrapy解析页面是串行还是并行?
  • (python)关于Scrapy中TwistedPipline报错
  • scrapy可以获得各个环节所用的时间吗
  • (python)使用scrapy的时候,循环为什么只能获取第一页的
  • (python)Scrapy模拟登陆遇到404问题
  • dnf喇叭怎么重复scrapy怎么实现重复或者定时采集
  • scrapy的headerauthorization
  • python爬虫(python)scrapy爬虫不能循环运行?
  • (python)在编写scrapy爬虫的时候rules中allow的书写问题

相关文章

  • 2017-06-07 rails日志怎么设置让其我不想要的日志信息不输入到文件中去?
  • 2017-06-07 七牛插件和visualcomposer插件冲突
  • 2017-06-07 Arrayijoini为何返回的是这个结果呢?
  • 2017-06-07 golang学golang之前都需要哪些前置知识?
  • 2017-06-07 windows环境下python34如何升级python35
  • 2017-06-07 如何用jQuery直接传文件至七牛
  • 2017-06-07 我上传了个txt文本,发现用提供的外部地址直接浏览器访问和迅雷下载都不是最新的数据。
  • 2017-06-07 github之前提出了两步认证,我想问,两步认证之后,tortoiseGit怎么配置才能正常使用
  • 2017-06-07 回调服务器地址固定?
  • 2017-06-07 如何用javascript的RegExp判断domain?

文章分类

  • JavaScript
  • ASP.NET
  • PHP
  • 正则表达式
  • AJAX
  • JSP
  • ASP
  • Flex
  • XML
  • 编程技巧
  • Android
  • swift
  • C#教程
  • vb
  • vb.net
  • C语言
  • Java
  • Delphi
  • 易语言
  • vc/mfc
  • 嵌入式开发
  • 游戏开发
  • ios
  • 编程问答
  • 汇编语言
  • 微信小程序
  • 数据结构
  • OpenGL
  • 架构设计
  • qt
  • 微信公众号

最近更新的内容

    • AddComponent(字符串变量)调用函数
    • 大家赞成博问大赛继续举行吗?
    • 列表追加字典元素,奇怪的现象
    • 如何检测客户端被电信运营商劫持情况,然后做处理
    • python运行多个函数,如何让单个函数的报错不影响其他函数的执行
    • laravel这个同样两张表取别名查询出错,怎么改呢?
    • 多线程的底层原理是怎么样的?
    • (shell)使用npm安装模块时出现这个错误,什么模块都无法安装
    • 要提高境外网站访问速度,在WPSuperCache中应该填入哪个域名?
    • python#coding:utf-8和setdefaultencoding有什么区别?

关于我们 - 联系我们 - 免责声明 - 网站地图

©2020-2025 All Rights Reserved. linkedu.com 版权所有