selenium数据提取学习（1）

import time
from selenium import webdriver
# 设置浏览器
driver = webdriver.Edge()
# 控制浏览器访问地址
driver.get("https://www.baidu.com/")
time.sleep(3)

# 在百度中搜索python
driver.find_element_by_id('kw').send_keys('python')  # 定位 并输入
# 点击百度搜索
driver.find_element_by_id('su').click()  # 点击


time.sleep(6)
driver.quit()

from selenium import webdriver

url = 'http://www.baidu.com'

driver=webdriver.Edge()

driver.get(url)

# driver.find_element_by_xpath('//*[@id="kw"]').send_keys('python3')
# driver.find_element_by_css_selector('#kw').send_keys('python3')
driver.find_element_by_name('wd').send_keys('python3')
driver.find_element_by_id('su').click()

# 通过文本进行元素定位
# driver.find_element_by_link_text('hao123').click()
driver.find_element_by_partial_link_text('hao').click()

# 目标元素在当前html中是唯一标签的时候 才能使用
driver.find_element_by_tag_name('title')
'''
find_element_by_xxx
    定位到是一个对象
    定位不到报错
find_elements_by_xxx
    定位到是一个列表
    否则空列表
'''

import time

from selenium import webdriver

url='http://www.baidu.com'

# 创建一个浏览器对象
driver = webdriver.Edge()

# 访问指定url地址
driver.get(url)

# 显示源码
print(driver.page_source)
# 显示响应对应的url
print(driver.current_url)
print(driver.title)

time.sleep(2)
driver.get('http://www.douban.com')
time.sleep(2)
driver.back()
time.sleep(2)
driver.forward()
time.sleep(2)
# driver.close()
# 保存网页截图/快照
driver.save_screenshot('baidu.png')
driver.quit()

# Boss 数据提取
from selenium import webdriver
url='https://www.zhipin.com/chengshi/c101091000/?sid=sem_pz_bdpc_dasou_title'
driver=webdriver.Edge()
driver.get(url)

el_list=driver.find_elements_by_xpath('//*[@id="main"]/div/div[3]/ul[1]/li/div/a')
for el in el_list:
    print(el.text,el.get_attribute('href'))

# el.click()   点击
# el.send_keys()   输入元素
# el.clear()   清空操作