![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python自动化数据收集项目
文章平均质量分 92
Lucas Zhang
这个作者很懒,什么都没留下…
展开
-
Python自动化数据收集项目(2)— Utils之配置管理工具(configparser的使用)
系列文章目录 https://blog.csdn.net/weixin_44391661/article/details/110632847 文章目录系列文章目录前言一、谈谈配置1.为什么需要配置管理2.为什么要先写配置管理工具二、Config管理的实现1.创建模块与类2.创建配置文件3.ConfigParser模块的基本用法4.实现函数读取配置文件5.自定义配置管理类的使用总结 前言 上一篇文章已经创建好了基本的项目结构,今天开始我们要往里面填充内容啦。俗话说工欲善其事,必先利其器,我们在开始我们的原创 2020-12-04 15:42:25 · 627 阅读 · 0 评论 -
Python自动化数据收集项目(1)— 创建项目DAS项目结构
系列文章目录 TBD 文章目录系列文章目录前言一、开发环境二、项目结构1.需求分析2.辅助模块2.结构搭建总结 前言 大家在工作或个人项目中可能经常需要写一些数据收集类的小项目,例如从Jenkins、Confluence、Jira等开放了API的平台获取数据并存储至数据库用于可视化或分析,并且过程最好是自动化定时执行的。这类项目看似简单,但随着周围业务和依赖项的发展,我们需要从多个数据源获取数据并存储至多个数据库中的状况,如果针对每种数据的获取和存储都写一个单独的项目,那我们的多个项目将很难管理。原创 2020-12-04 13:30:53 · 395 阅读 · 1 评论