使用Python的Supervisor进行进程监控以及自动启动
做服务器端开发的同学应该都对进程监控不会陌生,最近恰好要更换uwsgi为gunicorn,而gunicorn又恰好有这么一章讲进程监控,所以多研究了下。
结合之前在腾讯工作的经验,也会讲讲腾讯的服务器监控是怎么做的。同时也会讲下小团队又该怎么敏捷的解决。
下面按照监控的方法依次介绍。
一、按照进程名监控
在腾讯内部所有server都是要打包发布的,而在打包过程中是需要填写要监控的进程名,然后在crontab中定时通过ps查询进程是否存在。
这种方法是比较简单的方法,但是考虑到很多进程会在启动之后改名,以及进程名存在各种特殊字符,多个进程同时存在的问题,实际操作起来并不是很舒服。
举个简单的例子,gunicorn启动之后的进程名类似这样master:[wsgi:app],其中的方括号在grep时要记得转义,否则就会出问题。
不过不管怎么说,这种方法在很多其他方式用不了的时候反而是最简单的方法。
下面是用python的实现:
defmonitor_process(key_word,cmd): p1=subprocess.Popen(['ps','-ef'],stdout=subprocess.PIPE) p2=subprocess.Popen(['grep',key_word],stdin=p1.stdout,stdout=subprocess.PIPE) p3=subprocess.Popen(['grep','-v','grep'],stdin=p2.stdout,stdout=subprocess.PIPE)
lines=p3.stdout.readlines() iflen(lines)>0: return
sys.stderr.write('process[%s]islost,run[%s]\n'%(key_word,cmd)) subprocess.call(cmd,shell=True)