python导入txt再写入mysql_python第五篇：Linux上将txt导入mysql

昨天写小项目的时候遇到了一个需求：把txt文档的数据导入到mysql数据库中，开始本来想直接用Mysql Workbench导入TXT文件，但是最后发现不支持TXT导入，结果我吧嗒吧嗒的去把TXT转了Excel，拿到Linux上导入的时候又发现了各种乱码问题。

抱着没有什么是程序员干不了的原则，我手写了一个Python代码直接操作文件进行导入了。结果大概一万多条的文件，导入时间大概两分钟。

下面是具体的代码：

mysqlpython.py文件： 自定义的连接mysql数据库的类

importtxt.py文件： 读TXT文件并进行插入操作

dict.txt文件： 要操作的TXT文件

mysqlpython.py文件

from pymysql import *

classMysqlpython:

def __init__(self,database,host="localhost",

user="root",password="123456",

charset="utf8",port=3306):

self.database=database

self.host=host

self.user=user

self.password=password

self.charset=charset

self.port=port

# 创建数据连接和游标对象

def open(self):

self.db= connect(host=self.host,

user=self.user,

password=self.password,

port=self.port,

database=self.database,

charset=self.charset)

self.cur=self.db.cursor()

# 关闭游标对象和数据库连接对象

def close(self):

self.cur.close()

self.db.close()

# 执行sql命令

def zhixing(self,sql,L=[]):

self.open()

self.cur.execute(sql,L)

self.db.commit()

self.close()

# 查询功能

def all(self,sql,L=[]):

self.open()

self.cur.execute(sql,L)

result=self.cur.fetchall()returnresultif __name__ == "__main__":

sqlh= Mysqlpython("dictionary")

sel= "select * from user"r=sqlh.all(sel)

print(r)

importtxt.py文件

import re

import sysfrommysqlpython import Mysqlpython

sqlh= Mysqlpython("dictionary")

def insert(data):

arr=data.split()

name= arr[0]

description= " ".join(arr[1:])

ins= "insert into words(name,description) values(%s,%s)"sqlh.zhixing(ins,[name,description])

def get_addr():

f= open('./dict.txt')

lines=f.readlines()for line inlines:

insert(line)

f.close()return ''

if __name__ =='__main__':

print(get_addr())

dict.py文件(我复制了几条文件)

a indef art one

abacus n.frame with beads that slide along parallel rods, usedfor teaching numbers to children, and (in some countries) forcounting

abandon v. go awayfrom (a person or thing or place) not intending to return; forsake; desert

abandonment n. abandoning

abase v.~ oneself/sb lower oneself/sb in dignity; degrade oneself/sb ;

abash to destroy the self-possession or self-confidence of:disconcert

abashed adj.~embarrassed; ashamed

abate v. make or become less

abattoir n.= slaughterhouse (slaughter)

针对不同的分隔符修改一下正则表达式即可。全部代码都贴上去了，直接复制修改下数据库的配置就可以运行了。

有道词典

``` a indef art ...

X

``` 　　一个indef艺术 　　abacus n.frame平行杆滑动的珠子,用于儿童教学数字,(在一些国家)计数 　　放弃与离开(一个人或物或地方)不打算返回;离弃;沙漠 　　放弃n .放弃 　　作诉~自己/某人/降低自己的尊严;降低自己/某人; 　　使局促不安摧毁的沉着或自信:破坏 　　尴尬的形容词~尴尬;羞愧 　　减轻诉制造或变得更少 　　屠宰场n。=屠宰场(屠宰) 　　```