运维故障一则

写给自己,以作警示. 希望自己举一反三,不要再犯.

这个故障同 crontab 有关,在上线测试阶段吧 crontab server 停掉了.
在上线完成后忘记打开,导致程序没跑.最要命的是监控也是crontab跑的.
结果第二天悲剧.

总结:
怎么上线也不能停止服务,可以通过相关配置 使得相关程序在上线过程中不执行.
也可以避免最后需要启用crontab的事情.
其他相关可以举一反三,服务属于基础业务不能随便关.
一定要改配置,切记切记.