def readAllFiles(filePath):
fileList = os.listdir(filePath)
for file in fileList:
path = os.path.join(filePath, file)
if os.path.isfile(path):
file = open(path, ‘r’, encoding=‘utf-8’)
print(path)
#流程记录信息
if path.find(“workflow”) != -1:
analysisWorkflowCsv(file)
pass
#意见信息
elif path.find(“opinion”) != -1:
analysisOpinionCsv(file)
pass
#发文数据
elif path.find(“wd_24”) != -1:
analysisWd24Csv(file)
pass
#收文数据
elif path.find(“wd_25”) != -1:
analysisWd25Csv(file)
pass
else:
readAllFiles(path)
2、解析文件内容,首行为标题栏需要跳过。入库操作每满1000条commit一次主要是python频繁提交执行次数达到1000+就会报错。1000条commit一次可以避免错误并缓解内存压力。
‘’’
遇到问题没人解答?小编创建了一个Python学习交流QQ群:778463939
寻找有志同道合的小伙伴,互帮互助,群里还有不错的视频学习教程和PDF电子书!
‘’’
def analysisWorkflowCsv(file):
csvFile = csv.reader(file)
读取一行,下面的reader中已经没有该行了
head_row = next(csvFile)
print(head_row)
__conn = getConnect_old()
counter = 0
for row in csvFile:
workflow = {}
workflow[‘UUID’] = row[0]
workflow[‘subject’] = row[1]
workflow[‘signdate’] = row[2]
workflow[‘U_UnitName’] = row[3]
workflow[‘U_UnitUser’] = row[4]
workflow[‘U_UnitUserTitle’] = row[5]
workflow[‘U_UnitEndTime’] = row[6]
workflow[‘U_UnitAction’] = row[7]
workflow[‘U_UnitToTitle’] = row[8]
if insertWorkflows(__conn, workflow):
counter += 1
if counter % 1000 == 0:
__conn.commitData()
print(“已经插入工作流数据: %d 条。”%counter)
__conn.commitData()
__conn.closeConn()
2、解析文件内容,首行为标题栏需要跳过。入库操作每满1000条commit一次主要是python频繁提交执行次数达到1000+就会报错。1000条commit一次可以避免错误并缓解内存压力。
‘’’
解析文件
‘’’
def analysisWorkflowCsv(file):
csvFile = csv.reader(file)
读取一行,下面的reader中已经没有该行了
head_row = next(csvFile)
print(head_row)
__conn = getConnect_old()
counter = 0
for row in csvFile:
workflow = {}
workflow[‘UUID’] = row[0]
workflow[‘subject’] = row[1]
workflow[‘signdate’] = row[2]
workflow[‘U_UnitName’] = row[3]
workflow[‘U_UnitUser’] = row[4]
workflow[‘U_UnitUserTitle’] = row[5]
workflow[‘U_UnitEndTime’] = row[6]
workflow[‘U_UnitAction’] = row[7]
workflow[‘U_UnitToTitle’] = row[8]
if insertWorkflows(__conn, workflow):
counter += 1
if counter % 1000 == 0:
__conn.commitData()
print(“已经插入工作流数据: %d 条。”%counter)
__conn.commitData()
__conn.closeConn()
3、数据入库
‘’’
插入工作流程数据
‘’’
def insertWorkflows(__conn, workflow):
__sql = ‘’’
INSERT INTO workflows (
UUID, U_UnitName, U_UnitUser, U_UnitUserTitle, U_UnitEndTime, U_UnitAction, U_UnitToTitle, subject, signdate
) VALUES (%s, %s, %s, %s, %s, %s, %s, %s, %s)
‘’’
__params = (
workflow[‘UUID’], workflow[‘U_UnitName’], workflow[‘U_UnitUser’], workflow[‘U_UnitUserTitle’],
workflow[‘U_UnitEndTime’], workflow[‘U_UnitAction’], workflow[‘U_UnitToTitle’], workflow[‘subject’],
workflow[‘signdate’]
)
print(__sql % __params)
return __conn.mssql_exe_sql(__sql, __params)
自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。
深知大多数Python工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!
因此收集整理了一份《2024年Python开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Python开发知识点,真正体系化!
由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新
如果你觉得这些内容对你有帮助,可以添加V获取:vip1024c (备注Python)
文末有福利领取哦~
👉一、Python所有方向的学习路线
Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
👉二、Python必备开发工具
👉三、Python视频合集
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
👉 四、实战案例
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。(文末领读者福利)
👉五、Python练习题
检查学习结果。
👉六、面试资料
我们学习Python必然是为了找到高薪的工作,下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料,并且有阿里大佬给出了权威的解答,刷完这一套面试资料相信大家都能找到满意的工作。
👉因篇幅有限,仅展示部分资料,这份完整版的Python全套学习资料已经上传
我们学习Python必然是为了找到高薪的工作,下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料,并且有阿里大佬给出了权威的解答,刷完这一套面试资料相信大家都能找到满意的工作。
👉因篇幅有限,仅展示部分资料,这份完整版的Python全套学习资料已经上传