crontab 定时任务的增强管理

[marquina]

OP 运行了不少 crontab 定时任务，一个痛点是很难主动发现定时任务的异常，往往是等未看到执行成功的结果才知道定时任务跑不起来。

经过一番搜寻，OP 目前发现了两种主动发现定时任务异常的思路：

1. 定时任务执行成功后上报结果，服务端发现长时间无结果后进行告警，如Cron Job Monitoring - Healthchecks.io。缺点在于需要侵入定时任务代码。
2. 使用 crontab 自带的 MAILTO 功能，屏蔽 stdout 并重定向 stderr 后，定时任务的异常输出可发送至指定邮箱。缺点在于需要侵入定时任务的输出设置，并且无法对异常进行聚合。

所以 OP 想开发一个工具来管理定时任务。通过识别定时任务的 stderr/exit code ，工具可在 连续 M 次执行失败 /过去 N 分钟未成功执行 之类的场景下发送邮件 /telegram 等告警。这样定时任务就可以不用做啥改动了。

其他一些 OP 没有强烈需求但可能有用的功能：

• 任务手动执行
• 超时控制 /重试
• 版本控制
• 执行历史（日志输出 /耗时）
• web-UI 管理（如crontab-ui）
• 接入 metrics

Q: 为啥不用青龙面板？

A: 青龙面板看起来是单独做了一套执行环节（需要手动指定依赖），而笔者倾向于远程在 linux server 上开发+调试完后用相同的环境运行 crontab ，不然安装 chrome-driver 等比较重的依赖会比较麻烦。

大家怎么看？

[perfectlife]

啥时候开发，我 star 一下

[f5c4ebc2]

感觉这个想法挺好的，我也有类似的需求，但目前碰到的情况基本都可以通过 OP 提到的第一种方法解决，代码侵入性问题可以通过类似装饰器的方法在一定程度上解决。

另一种现成的方法是用云函数，设置一下自动告警的规则就可以了，比较灵活方便。

[37Y37]

我做过类似的，功能更强大，跑下来也比较稳定，看看是不是有参考的价值 https://blog.ops-coffee.cn/s/yjftypchd03ftglv_jsqww

[chuanqirenwu]

无侵入式的实现方案有了吗？

[815979670]

@37Y37 我有个类似的想法构思，看你的文章挺有参考价值的。
我想尝试 sqlite + 单个主程序的方式 用一个小而美的形态来实现这个

[ft3312591]

有没有纯粹一点只有 crontab 远程执行的东西，我只想把所有脚本都统一放在一起，管理方便

[marquina]

@ft3312591 控制其它服务器上的 crontab ？

[marquina]

@37Y37 这个看起来是企业级解决方案？对于个人 crontab 使用场景来说可能有点太重了😂

[marquina]

@chuanqirenwu 没呢，所以准备做一个

[chuanqirenwu]

@marquina 方案都没有怎么实现呀？我最近也在做类似的东西，仿照的 healthchecks.io 的做法，不知道无侵入式应该怎么实现呢？

[marquina]

@chuanqirenwu 技术细节的话帖子里说了一部分。新流程下该工具会充当 crontab 和执行命令的中间层，工具执行完命令后会检查 stderr 和 exit code ，判断是否成功。

[chuanqirenwu]

哦哦，那就类似于 ansible 或者 AWX 了，需要自己集成调度器。

[julyclyde]

yet another

[marquina]

@julyclyde 啥意思

[ft3312591]

@marquina 不是控制，就是定时在一台机器上，定时远程 ssh 去执行脚本，有没有这种管理 web 系统？

[marquina]

#15 @ft3312591 https://github.com/ouqiang/gocron 采用中控节点+执行节点的架构设计，应该是能满足你的需求的

[marquina]

发现开源项目 ouqiang/gocron ，整体比较重，但从功能上来说基本满足我的需求了。