模拟网页点击爬虫交管12123违章数据！违章信息及时处理！(1)

from selenium import webdriver

import time

import csv

import datetime

from selenium.webdriver.common.by import By

from selenium.webdriver.support import expected_conditions as EC

from selenium.webdriver.support.wait import WebDriverWait

import math

import xlrd

读取需要查询的车牌号

data = xlrd.open_workbook(‘cheliang.xlsx’)

创建浏览，打开网页

opt = webdriver.ChromeOptions() #创建浏览

#opt.set_headless() #无窗口模式

driver = webdriver.Chrome(options=opt) #创建浏览器对象

driver.maximize_window() #最大化窗口

​

print(“正在打开网页”)

driver.get(‘’) #打开网页

依次点击单位登录、输入账号、密码、点击验证码填写区域触发图片、勾选、输入验证码、点击登录

time.sleep(3) #加载等待

print(“点击单位登录”)

time.sleep(3) #加载等待

driver.find_element_by_xpath(“/html/body/div[1]/div[2]/div/div[2]/div[2]/button”).click()#点击单位登录

​

time.sleep(3) #加载等待

print(“正在填写账号”)

elem = driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[1]/div/input”)

清空原有内容

elem.clear()

填入账号

elem.send_keys(“”)

​

time.sleep(1) #加载等待

print(“正在填写密码”)

elem = driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[2]/div/input”)

清空原有内容

elem.clear()

填入密码

elem.send_keys(“”)

​

time.sleep(1) #加载等待

print(“正在查看验证码”)

driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[3]/div/input”).click()#查看验证码

print(“请输入验证码”)

yanzhengma=input()

​

time.sleep(1) #加载等待

driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[4]/div/label/input”).click()#勾选

​

time.sleep(1) #加载等待

填入验证码

elem = driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[3]/div/input”)

elem.clear()

elem.send_keys(str(yanzhengma))

​

time.sleep(1) #加载等待

print(“正在登陆”)

driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[5]/button”).click()#点击

点击违法查询，设置查询时间

driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/div/div[2]/form[1]/div[5]/button”).click()#点击

time.sleep(3) #加载等待

driver.find_element_by_xpath(“/html/body/div[4]/div/div[1]/ul/li[5]/a”).click()#点击违法查询

time.sleep(1) #加载等待

driver.find_element_by_xpath(“/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[1]/div/div[1]/span/i”).click()#点击选择日期

for i in range(3):

time.sleep(0.5) #加载等待

driver.find_element_by_xpath(“/html/body/div[6]/div[4]/table/thead/tr/th[1]/i”).click()#点击

time.sleep(0.5) #加载等待

driver.find_element_by_xpath(“/html/body/div[6]/div[4]/table/tbody/tr/td/span[1]”).click()#点击

time.sleep(0.5) #加载等待

driver.find_element_by_xpath(“/html/body/div[6]/div[3]/table/tbody/tr[2]/td[1]”).click()#点击

循环依次查询每个车牌违章信息，每次都需要清空上次输入，填写本次查询车牌，识别有多少条数据，共多少页，每页最多展示10条，最后一页有多少条数据

for ii in range(0,nrows):

rowValues= table.row_values(ii) #某一行数据

print(‘正在读取第’+str(ii+1)+‘辆车’)

填写车牌

time.sleep(0.5) #加载等待

elem = driver.find_element_by_xpath(“/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[3]/div/input”)

elem.clear()

elem.send_keys(rowValues)#输入车牌

time.sleep(0.1) #加载等待

driver.find_element_by_xpath(“/html/body/div[3]/div/div[2]/div[1]/div[2]/form/div[4]/button”).click()#点击查询

time.sleep(0.5) #加载等待

result=driver.find_element_by_xpath(“/html/body/div[3]/div/div[2]/div[2]/div[1]/div/p/span”).text#总违章条数

result=int(result)

a=math.ceil(result/10)#总页数

b=result%10 #除余

读取列表中的数据，其中扣分和罚款需要点击"查看详情"，从弹窗中读取数据’

result1=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[1]”))).text

result2=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[2]”))).text

result3=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[3]”))).text

result4=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[4]”))).text

result5=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[5]”))).text

result6=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[6]”))).text

result7=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[7]”))).text

WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//table[@id=‘my-msg-list’]/tbody/tr[”+str(j)+“]/td[8]/a”))).click()#查看详情，打开弹窗

time.sleep(1) #加载等待

result8=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//form[@class=‘form-horizontal’]/div[7]/span[2]”))).text

result9=WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//form[@class=‘form-horizontal’]/div[8]/span[2]”))).text

result=[result1,result2,result3,result4,result5,result6,result7,result8,result9]

R.append(result)

WebDriverWait(driver,10).until(EC.element_to_be_clickable((By.XPATH,“//div[@class=‘modal-footer ui_modal’]/button”))).click()#关闭弹窗

time.sleep(0.5) #加载等待

每读取一辆车的数据就写入表格中

with open(wenjian,‘w’,encoding=‘utf-8’,newline=‘’) as fp:

writer = csv.writer(fp)

writer.writerows® #写入数据

完整代码

from selenium import webdriver

import time

import csv

import datetime

from selenium.webdriver.common.by import By

from selenium.webdriver.support import expected_conditions as EC

from selenium.webdriver.support.wait import WebDriverWait

import math

import xlrd

data = xlrd.open_workbook(‘cheliang.xlsx’)

table = data.sheets()[0]

nrows = table.nrows #行数

ncols = table.ncols #列数

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Python开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Python开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024c （备注Python）

61282296f86381401c05e862fe4e9.png)

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Python开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录大纲截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且后续会持续更新

如果你觉得这些内容对你有帮助，可以添加V获取：vip1024c （备注Python）
[外链图片转存中…(img-L0BJR5nM-1711876955846)]