selenium中无头浏览器的用法

学习爬虫你一定要对前端的知识有所了解:

# 让浏览器在后台默默的运行

import time
from selenium.webdriver import Chrome
from selenium.webdriver.support.select import Select      #对 select 的处理
from selenium.webdriver.chrome.options import Options   # 无头的模块导入


# 准备好参数配置   不用记  要用的时候 到时候粘过来
opt = Options()
opt.add_argument('--headless')
opt.add_argument('disbale-gpu')  #不显示

web = Chrome(options=opt)   #把参数配置设置到浏览器中

web.get('https://www.endata.com.cn/BoxOffice/BO/Year/index.html')


#定位到下拉列表:
tit = web.find_element_by_xpath('//*[@id="OptionDate"]')
# 这里是对元素进行包装 ,包装成下拉菜单
sel = Select(tit)

# 让浏览器进行调试选项:
for i in range(len(sel.options)):  #  options 就是定位索引位置 i 就是每一个下拉框中 选项的索引位置
    sel.select_by_index(i)  #按照索引进行切换
    time.sleep(2)
    table = web.find_element_by_xpath('//*[@id="TableList"]/table') #  页面内容的文本信息
    print(table.text)
    print('====================================================')

print('运行完毕!')
web.close()


# 怎样拿到页面代码( 经过数据加载以及js执行之后的结果的html内容)
print(web.page_source)

 

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

itLaity

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值