用python操作mysql

安装python库:
1、pip install pymysql
2、通过安装文件python setup.py install

将从维基百科爬取的词条存入mysql:

#引入开发包
from urllib.request import urlopen
from bs4 import BeautifulSoup
import re
import pymysql.cursors
#请求URL并把结果用UTF-8编码
resp=urlopen("https://zh.wikipedia.org/wiki/Wikipedia:%E9%A6%96%E9%A1%B5").read().decode("utf-8")
#使用BeautifulSoup去解析
soup=BeautifulSoup(resp,"html.parser")
#print(soup)
#获取所有以/wiki/开头的a标签的href属性
listUrl=soup.findAll("a",href=re.compile("^/wiki/"))
#输出所有词条对应的名称和URL
for url in listUrl:
    if not re.search("\.(jpg|JPG)$",url["href"]):
        print(url.get_text(),"<----->","https://zh.wikipedia.org"+url["href"])
        #获取数据库连接
        connection=pymysql.connect(host='localhost',
                                   user='root',
                                   password='root',
                                   db='wikiurl',
                                   charset='utf8mb4')
        try:
           #获取会话指针
           with connection.cursor() as cursor:
               #创建sql语句
               sql="insert into `urls`(`urlname`,`urlhref`) values(%s,%s)"
               #执行sql语句
               cursor.execute(sql,(url.get_text(),"https://zh.wikipedia.org"+url["href"]))
               #提交
               connection.commit()
        finally:
            connection.close()

这里写图片描述

cursor.execute() #得到总记录数
cursor.fetchone() #查询下一行
cursor.fetchmany(size=None) #得到指定大小
cursor.fetchall() #得到全部

用python查询数据库:

#导入开发包
import pymysql.cursors
#获取数据库连接
connection=pymysql.connect(host='localhost',
                           user='root',
                           password='root',
                           db='wikiurl',
                           charset='utf8mb4')
try:
    #获取绘画指针
    with connection.cursor() as cursor:
        #查询语句 
        sql = "select `urlname`,`urlhref` from `urls` where `id` is not NULL"
        #得到总记录数
        count=cursor.execute(sql)
        print(count)
        #得到全部
        #result1=cursor.fetchall()
        #print(result1)
        print("\n")
        #得到三条数据
        result2=cursor.fetchmany(size=3)
        print(result2)
finally:
    connection.close()
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值