数据分析过程自动化的策略

一 基本信息 （Intro）

数据分析过程自动化是着眼整个离线数据分析过程，针对每个具体的任务，应用合适的技术（工具），最大程度地降低人工操作。离线数据分析中，数据的反复、需求的变化、工期的紧迫、品质的苛求等现状，迫使我们必须考虑实现快速的数据验证、便捷的模型重算、系统的数据追溯、完整的过程跟踪，因此，数据分析过程自动化并不是可有可无的“奢侈品”，而是不容忽视的“必需品”。

二 解决方案（Solution）

自动化是一种意识，是一种面对问题的思维方式，他需要我们养成“脑勤手懒”的习惯。数据分析过程自动化面对的是整个数据分析过程，要拓展我们的“视野”，分析每一个过程任务，全面推进自动化。而且，自动化基于任务的，技术、工具仅仅是实现任务和目标的工具，要打破技术局限，从任务（问题）的本质出发，寻求自动化的最优方案，不被现有的技术、工具绑架。基于以上认知，我们来梳理一下数据分析过程自动化的关键判断点