pandas讀取csv進行繁體和簡體的轉化並導入Oracle數據庫

需求

公司的csv裡的繁體裡混雜了簡體字符，需要轉化後重新導入數據庫，所以我是用了hanziconv這個庫來轉化。

主要安裝的安裝包

pip install pandas
pip install hanziconv
#SQLAlchemy2.0不支持pandas的sql（在python3.7.9的環境下）
pip install SQLAlchemy==1.4.35
pip install cx_Oracle

代碼

import pandas as pd
from hanziconv import HanziConv
data = pd.read_csv("D:\PythonCode\pythondemo\day02\MY_CSV.csv")
x,y = data.shape
print(y)
from sqlalchemy import create_engine,types
conn_string='oracle+cx_oracle://lin:lin123@localhost:1521/MyDataBase'
engine = create_engine('oracle://lin:lin123@localhost:1521/myDatabase')
    # remove_data，为一个DataFrame对象
#data.rename(columns={'time':'TIME'})
for indexs in data.index:
    # 逐行查看，values可以用int型索引
    for i  in range(y):
      #print(indexs)
      print("第" + str(indexs)+ "行 第"+str(i)+"列數據為"+str(data.loc[indexs].values[i]))
      xx_transfer = str(data.loc[indexs].values[i])
      data.loc[indexs].values[i] = HanziConv.toTraditional(xx_transfer)    
#参考：https://blog.csdn.net/baidu_39148260/article/details/103341108
#设置写入类型，不然默认是用CLOB类型写入，内置的类型转换很慢，小量数据无所谓
#data['my_create_time'] = pd.to_datetime(data['my_create_time'])

dtyp = {c:types.VARCHAR(data[c].str.len().max()) for c in data.columns[data.dtypes == 'object'].tolist()}
#print(dtyp)
#大小字符要求一致
data.to_sql("MY_CSVS", con=engine, if_exists='append', index=1, index_label=None)
engine.dispose()

簡體繁體的轉化比對

#encoding: utf-8;
from hanziconv import HanziConv
line_jian = '广东'
line_fan = '廣東'
jian = HanziConv.toSimplified(line_fan)                #繁转简
fan = HanziConv.toTraditional(line_jian)            #简转繁
resu = HanziConv.same(line_jian, line_fan)            #比较繁简体文字是否相同
print(jian)
print(fan)
print(resu)

關於TypeError: 'numpy.int64' object is not iterable問題的解決的問題

這裡主要看是多少維度的數據，當你指定了pandas的某一個數據的時候，數據為一維度，當需要進行簡體轉繁體字進行轉換自然會發生這個這個錯誤