爬虫笔记5 向动态HTML迈进,selenium入门,获取响应后的element代码以及网页COOKIE

这篇博客介绍了如何使用selenium加载动态网页,并进行元素定位与操作。主要内容包括通过PhantomJS加载网页、使用CSS3选择器定位元素、处理找不到元素的情况、查看页面源代码、获取cookies以及处理iframe场景。此外,还讲解了如何避免找不到元素的错误以及退出selenium的正确方式。
摘要由CSDN通过智能技术生成

1.加载网页代码

  • from selenium import webdriver

使用游览器(支撑绝大多数游览器)

  • driver = webdriver.PhantomJS()

游览器进行游览

  • driver.get(“http://www.baidu.com”)

由于PhantomJS无界面,可以使用下面代码保存界面

  • driver.save_screenshot(“百度.png”)

2.定位和操作

在这里插入图片描述
支持所有element的搜寻比如id(id用的最多)(send_keys是输入,可以用来输入账户密码)

  • driver.find_element_by_id(“kw”).send_keys(“python”)

click()是模拟点击

  • driver.find_element_by_id(“su”).click()

get_attribute()获取对应元素的属性

  • driver.find_element_by_id(“su”).get_attribute(“src”)

text获取文本

  • driver.find_element_by_id(“su”).text

主要定位用法

element是返回一个元素
elements返回一个列表的元素

语法 作用
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值