通用万能excel导入的Python实现

最新推荐文章于 2024-09-19 09:21:34 发布

置顶

qq_21873747

最新推荐文章于 2024-09-19 09:21:34 发布

阅读量7.7k

点赞数 4

分类专栏： python-通用excel导入文章标签： python 通用excel导入万能excel导入

本文链接：https://blog.csdn.net/qq_21873747/article/details/79531032

版权

本文介绍了如何使用Python实现通用的Excel导入功能，通过配置文件设定数据处理规则，实现数据分析和挖掘，最终转化为JSON格式。文章包含配置文件说明及test.py和importExcel.py两个关键代码文件。

摘要由CSDN通过智能技术生成

通用万能excel导入的Python实现

一.正言

从设计方案到算法和功能代码实现，花了我一周时间，在这里记录方便大家参考。废话少说，首先通过配置文件配置你想要的数据，只需要配置简单的表达式就可以实现由价值的数据分析和挖掘出有价值的信息数据。最终得到的是以字段为首的json数据。后期可以对excel或导出功能做成可视化，使用户的操作和体验更加便捷化。

二.配置文件

{
	"updateTime": "2018-02-07",           
	"database_host": "10.10.10.6",         
	"database_port": 9400,                
	"database_name": "mdap-dev",    
	"filePath":"/projectName/input", 
	"fileName":"test.xlsx", 	      
	"$excelConfig": [  					  
		{
			"sheetName":"数据录入" ,  	  
			"target_data_area":"A2~A31",
			"target_data_key":"(x=A,y=1)",
			"datas":[ 					
			 		{
						"value": "(x=B,y=_y)",
						"key":"指标小类"
					},
					{
						"value": "(x=C,y=_y)",
						"key":"(x=C,y=1)"
					},
					{
						"value": "(x=D,y=_y)",
						"key":"(x=D,y=1)"
					},
					{
						"value": "(x=E,y=_y)",
						"key":"(x=E,y=1)"
					},
					{
						"value": "(x=F,y=_y)",
						"key":"(x=F,y=1)"
					}
				
			 ]
			
		}
		
	]
}

三。配置文件说明

"updateTime": 更新时间设置
"database_host": "10.10.10.6",  存数据库地址       
"database_port": 9400,           端口号    
"database_name": "mdap-dev",    索引，名称
"filePath":"/projectName/input",  导入文件的路径
"fileName":"test.xlsx", 	      	导入文件的名称
"$excelConfig": [  			               文件具体参数配置    
	"sheetName":"数据录入" ,  	  第一个sheet的表名称
	"target_data_area":"A2~A31", 相对参照物字段对应取值区域
	"target_data_key":"(x=A,y=1)",相对参照物字段
	"datas":[ 					 其他字段配置
				"value": "(x=B,y=_y)",    字段对应的（通过公式表示取值横纵方向的取值范围）
				"key":"指标小类" 		 字段为"指标小类"

四.python代码

4.1 test.py

#coding=utf-8
import json
import config
import os, configparser
from importExcel import commonExcelImport 
'''
测试各种样式的excel导入返回json数据条 
通用模板
@author: andong

'''

#def loadSettingFile():

cp = configparser.ConfigParser()
Settings = dict(
    config_file = os.path.join(os.path.dirname(__file__),'template.json'),
    config = cp
)

path=r"D:\workSpace\allExcelExport\config\template.json"
with open(path, "r", encoding='UTF-8') as excelTemplate:
    data = json.load(excelTemplate)
    updateTime = data['updateTime']
    filePath = data['filePath']
    fileName = data['fileName']
    excelConfig = data['$excelConfig']
    counter = 1;
    for i in range(len(excelConfig)):#遍历配置文件中每个sheet
        print ("序号：%s   值：%s" % (i + 1, excelConfig[i]))
        if __name__ == '__main__':
            commonExcelImport(filePath,fileName,excelConfig[i])
            
       # result = importExcel.ready_excel(filePath,fileName,excelConfig[i])

4.2 importExcel.py