可以利用webdriver 打开一个浏览器
from selenium import webdriver
使时间中止至指定时间
import time
import pymysql
def search(url):
# 利用get()方法获取网页信息并返回
return driver.get(url)
def parse_one_page(page):
# 查找出网页中全部的tr标签并赋给 tr_list
tr_list = driver.find_elements_by_tag_name(‘tr’)
return tr_list
创建数据库连接
def get_conn():
conn = pymysql.connect(host=“127.0.0.1”, port=3306,
user=“root”, password=“root”,
database=“chai”, charset=“utf8”)
# if conn == None:
# print(“数据库连接失败”)
# else:
# print(“数据库连接成功”)
cursor = conn.cursor()
return conn, cursor
释放资源
def close(conn, cursor):
cursor.close()
conn.close()
#数据库插入操作函数
def insert(sql):
# 获取数据库连接
conn,cursor=get_conn()