python爬虫获取标签报错 href属性为空

当用html.get('href')或者html[href'']来获取属性的时候,某些a标签中并没有href属性,此时会抛出异常,解决方法很简单,用异常处理语句块就能解决了

    try:

        value = 'https://free3d.com' + target.get(attr)

    except:

        value = ''

    if value:

        print(value)

 

  • 5
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
当进行Python爬虫开发时,常见的报错包括但不限于以下几种: 1. 网络连接错误:在进行网络请求时,可能会遇到网络连接错误,例如超时、拒绝连接等。这通常是由于网络不稳定或目标网站限制导致的。 2. HTTP错误:在进行网页请求时,可能会遇到HTTP错误,例如404 Not Found、500 Internal Server Error等。这通常是由于目标网页不存在或服务器内部错误导致的。 3. 解析错误:在解析网页内容时,可能会遇到解析错误,例如HTML解析错误、JSON解析错误等。这通常是由于网页结构变化或数据格式不符合预期导致的。 4. 验证码识别问题:有些网站为了防止爬虫,会设置验证码。当爬虫遇到验证码时,需要进行验证码识别或手动输入验证码才能继续访问。 5. 反爬虫策略:为了防止被爬虫抓取数据,一些网站会采取反爬虫策略,例如设置访问频率限制、用户代理检测等。当爬虫触发了反爬虫策略时,可能会被封禁或返回错误信息。 6. 数据库操作错误:在进行数据存储时,可能会遇到数据库操作错误,例如连接失败、表不存在等。这通常是由于数据库配置错误或操作不当导致的。 7. 其他异常错误:除了上述常见的报错,还可能会遇到其他各种异常错误,例如文件读写错误、内存溢出等。这些错误通常是由于代码逻辑错误或环境配置问题导致的。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值