需求
公司的csv裡的繁體裡混雜了簡體字符,需要轉化後重新導入數據庫,所以我是用了hanziconv這個庫來轉化。
主要安裝的安裝包
pip install pandas
pip install hanziconv
#SQLAlchemy2.0不支持pandas的sql(在python3.7.9的環境下)
pip install SQLAlchemy==1.4.35
pip install cx_Oracle
代碼
import pandas as pd
from hanziconv import HanziConv
data = pd.read_csv("D:\PythonCode\pythondemo\day02\MY_CSV.csv")
x,y = data.shape
print(y)
from sqlalchemy import create_engine,types
conn_string='oracle+cx_oracle://lin:lin123@localhost:1521/MyDataBase'
engine = create_engine('oracle://lin:lin123@localhost:1521/myDatabase')
# remove_data,为一个DataFrame对象
#data.rename(columns={'time':'TIME'})
for indexs in data.index:
# 逐行查看,values可以用int型索引
for i in range(y):
#print(indexs)
print("第" + str(indexs)+ "行 第"+str(i)+"列數據為"+str(data.loc[indexs].values[i]))
xx_transfer = str(data.loc[indexs].values[i])
data.loc[indexs].values[i] = HanziConv.toTraditional(xx_transfer)
#参考:https://blog.csdn.net/baidu_39148260/article/details/103341108
#设置写入类型,不然默认是用CLOB类型写入,内置的类型转换很慢,小量数据无所谓
#data['my_create_time'] = pd.to_datetime(data['my_create_time'])
dtyp = {c:types.VARCHAR(data[c].str.len().max()) for c in data.columns[data.dtypes == 'object'].tolist()}
#print(dtyp)
#大小字符要求一致
data.to_sql("MY_CSVS", con=engine, if_exists='append', index=1, index_label=None)
engine.dispose()
簡體繁體的轉化比對
#encoding: utf-8;
from hanziconv import HanziConv
line_jian = '广东'
line_fan = '廣東'
jian = HanziConv.toSimplified(line_fan) #繁转简
fan = HanziConv.toTraditional(line_jian) #简转繁
resu = HanziConv.same(line_jian, line_fan) #比较繁简体文字是否相同
print(jian)
print(fan)
print(resu)
關於TypeError: 'numpy.int64' object is not iterable問題的解決的問題
這裡主要看是多少維度的數據,當你指定了pandas的某一個數據的時候,數據為一維度,當需要進行簡體轉繁體字進行轉換自然會發生這個這個錯誤
![](https://i-blog.csdnimg.cn/blog_migrate/7cdf17c81c8be92a5064916ec68784e8.png)