任务调度和开源软件opencron的使用经验



        本文是我在一个技术分享群里面，对于任务调度和开源软件opencron的分享和使用体会，现在整理成文字，供大家参考。

        大家好，下面我来分享一下 部署和使用 opencron 任务调度工具的一些经验和体会

        我计划从五个方面来进行分享：

1 任务调度需求与要素分析

        任务调度，平时在大家的工作中应该会遇到比较多的，对于运维来说，操作系统的重要文件的每天定时备份，操作系统时间同步，各种数据库的备份，日志和监控信息的抓取等，都需要配置各种定时任务

        对于开发和业务来说，一般也会定时运行一些操作或作业，实现一定的开发需求和业务需求

        任务调度的需求，在各个地方都会有很多，如果想要建设自动化运维平台，任务调度，也是一个非常重要和基础的模块

        一般来说，少量的任务调度，都会使用操作系统本身的  crontab 来实现，把想要执行的任务封装成shell脚本，或者python脚本，添加到 crontab中进行定时运行，任务运行的结果写入null中，或者记录到一个日志文件中

        这种方式，比较稳定，简单，在定时任务数量很少，需求也比较简单的时候，是一种很常见的解决方案； 但当需要执行的任务数量很多，需求更复杂，需要能调度、可视化展示、结果分析等功能时，这种方式就不太能适合需求了

        以我现在的实际工作而言，每天需要调度几十个计算任务、同步任务，在用crontab之后，会有一些痛点，让我不得不考虑更合适的任务调度策略

        我大致梳理了一下，任务调度需要满足的几个基本要素：

1.         通信便捷性：调度server端与agent执行端可以方便通信；
2.         作业配置性：所有的作业都可以方便进行配置和修改；
3.         执行控制性：可以一般情况下定时调度，也可以异常情况处理；
4.         日志展示性：每个任务执行的结果可以方便看到，不用登陆每个机器翻日志来获取结果；
5.         结果概览性：可以概览知道一共配置了多少作业，今天是否正常，是否异常；

        这几个任务调度平台的要素，是我现在实际工作中一些痛点，和自己想要任务调度可以达到的目标

        在对调度需求和要素进行梳理了，我和同事也进行了调研和思考，目前调研和使用的就是 opencron 任务调度程序

2 opencron特点和部署

        这里首先感谢一些 opencron作者的无私分享@B e n-opencron

        对于opencron，该项目的特点和解决的问题如下：

        通过对这些特点进行了解后，觉得和我需要的几个方面的任务调度需求，还是比较契合的