文档章节

[喵咪Liunx(1)]计划任务队列脚本后台进程Supervisor帮你搞定

喵了_个咪
 喵了_个咪
发布于 2016/04/24 10:40
字数 1539
阅读 1121
收藏 6

#[喵咪Liunx(1)]计划任务队列脚本后台进程Supervisor帮你搞定#

##前言##

哈喽大家好啊,好久不见啊(都快一个月了),要问为什么没有更新博客呢只应为最近在录制PhalApi的视频教程时间比较少,作为弥补那么为大家带来一点干货Supervisor,话不多说那么就开始今天的分享把

附上:

喵了个咪的博客:w-blog.cn

Supervisor官网地址:https://pypi.python.org/pypi/supervisor

PhalApi官网地址:http://www.phalapi.net/

开源中国Git地址:http://git.oschina.net/dogstar/PhalApi/tree/release

##1. 我们遇到了什么问题##

了解python的童鞋应该听说过Supervisor,Supervisor是通过python实现的一个进程管理工具,

###1.1需要一直运行到后台的可执行文件启动的服务###

Supervisor是笔者在玩golang的时候了解到的,goalng的web应用API需要运行编译好的可执行文件才能把golang的内建web服务跑起来,和php不同的就是php-fpm会帮你解决这个问题,那么遇到这个问题后我找了很多资料在想我怎么可以让我的进程一直在后台启动并且如果有了问题自己死掉了自动重启呢.

从php的角度来说比如swoole你需要持续运行不依赖php-fpm是一个道理

第一个问题:

就是有一个进程需要每时每刻不断的跑,但是这个进程又有可能由于各种原因有可能中断。当进程中断的时候我希望能自动重新启动它

解决问题:

Supervisor设计出来的初衷就是用来解决,面对这类问题只需要简单的进行配置然后启动所有的事情都可以交给Supervisor来帮你完成

###1.2队列脚本###

说道队列脚本大家并不陌生,应为在很多场景下面都需要使用尤其是延时比较高的操作的时候(比如微信个推,消息推送,发送邮件,发送验证码)这些基本都是靠队列脚本处理来完成的,但是问题来了队列脚本也需要直接运行,并且在死掉了或者是异常退出了也需要启动起来,

在之前笔者是这么做的使用chontab+shell没过5秒跑一下shell然后shell监控一下脚本有没有死掉,如果死掉了就再次启动

第二个问题

就是有一个队列脚本需要运行

解决问题:

这个和第一个差不多只是场景不同但是需求是一样的都是需要运行一个常驻的后台进程

###1.3计划任务和定时任务###

在很多时候我们同样需要解决计划任务的问题比如晚上5点钟的时候统计数据,或者每个小时需要处理用户信息,那么这就需要用时计划任务和定时任务,在传统的实现方式上面使用chontab的计划任务和定时任务的偏多,但是如果当业务复杂了或者是动态的计划任务带有逻辑的时候就比较痛苦了

第三个问题

解决计划任务和定时任务

解决问题:

对于定时任务可以跑一个脚本在脚本内算出来我和这个时间还相差多少然后阻塞一定时间,当达到这个时间后那么进程结束,Supervisor会再次把你启动起来,但是解决复杂的定时任务或者是多个触发的可能就需要使用到一些辅助了比如node.js的异步swoole的异步能力

这个和第一个差不多只是场景不同但是需求是一样的都是需要运行一个常驻的后台进程

##2. Supervisor安装和使用##

Supervisor主要就两个命令:

supervisord : supervisor的服务器端部分,启动supervisor就是运行这个命令

supervisorctl:启动supervisor的命令行窗口。

安装(Centos):

yum install python-setuptools
easy_install supervisor
//如果easy_install不好使就从官方下载:
//然后通过python安装:
tar zxf supervisor-3.1.3.tar.gz
cd supervisor
python setup.py install

注意:python版本必须是2.x版本

生成配置文件(supervisord.conf):

echo_supervisord_conf > /etc/supervisord.conf

现在比如我需要添加一个需要运行的进程可以修改配置文件/etc/supervisord.conf在末尾加入如下内容:

;你需要启动的进程给个名字
[program:shadowsocks]
;你需要执行的语句
command=php /app/80/task/index.php xxxx
;是否自动启动
autostart=true
autorestart=true
;运行程序的用户
user=root

启动:

使用指定配置文件启动:supervisord -c /etc/supervisord.conf

使用默认配置文件启动:supervisord

启动之后大家可以使用supervisorctl status来获取当前运行的那些有进程

常用命令:

控制命令基本都通过supervisorctl执行,输入help可以看到命令列表。这是一些常用命令:

获得所有程序状态 supervisorctl status
关闭目标程序 supervisorctl stop spider
启动目标程序 supervisorctl start spider
关闭所有程序 supervisorctl shutdown

注意:如果修改了 /etc/supervisord.conf ,需要执行 supervisorctl reload 来重新加载配置文件

##3. 总结##

到这里关于supervisord的介绍就结束了,supervisord解决的常见的一些守护进程的问题,也可以使用到很多场景,那么在后面笔者会抽时间带来phalapi的supervisord计划任务队列脚本的拓展,多谢大家的支持!

注:笔者能力有限有说的不对的地方希望大家能够指出,也希望多多交流!

PhalApi官网QQ交流群:421032344 欢迎大家的加入!

© 著作权归作者所有

共有 人打赏支持
喵了_个咪
粉丝 262
博文 144
码字总数 185422
作品 4
杨浦
技术主管
[喵咪Liunx(4)Monit进程监控

有一段时间没有更新博客了,最近因为公司项目全球化以及最近慢慢在偏向学习团队管理忙的有点不可开交了,不过这次要给大家带来两篇关于Liunx日常开发维护管理中非常好用的两款利器,其中一个就是...

喵了_个咪
2016/10/17
130
0
**小草**/taskPHP

当前版本 2.0 历史版本 -->taskPHP1.0 taskPHP taskPHP基于php开发的定时计划任务框架,利用多进程实现任务的分配和运行,多种进程间通信驱动支持,支持多线程模式需要安装pthreads扩展(可选),支...

**小草**
2017/04/06
0
0
[喵咪BELK实战(3)] logstash+filebeat搭建

[喵咪BELK实战(3)] logstash+filebeat搭建 前言 在上节我们已经把elasticsearch+kibana已经搭建起来了,可以正常的进行数据的索引查询了,但是直接对elasticsearch进行操作也非常不方便, elast...

喵了_个咪
2017/05/09
0
0
[喵咪Liunx(5)集群管理利器pssh

[喵咪Liunx(5)集群管理利器pssh 哈喽大家好呀!大家在管理服务器的时候如果只是一两台还好,当你管理三台以上的服务器的时候,你安装任何一个软件更改任何一个配置文件就要无比麻烦的每一台机器...

喵了_个咪
2016/10/17
60
0
CentOS7下Supervisor安装与配置(Linux/Unix进程管理工具)

Supervisor(http://supervisord.org/)是用Python开发的一个client/server服务,是Linux/Unix系统下的一个进程管理工具,不支持Windows系统。它可以很方便的监听、启动、停止、重启一个或多...

yzy121403725
06/27
0
0

没有更多内容

加载失败,请刷新页面

加载更多

OSChina 周日乱弹 —— 恨不得给你买张飞机挂票

Osc乱弹歌单(2018)请戳(这里) 【今日歌曲】 @开源中国首席灵魂师:分享张希/曹方的单曲《认真地老去》 来不及认真的年轻过,就认真的老去! 《认真地老去》- 张希/曹方 手机党少年们想听...

小小编辑
21分钟前
27
5
如何实现靠谱的分布式锁?

分布式锁,是用来控制分布式系统中互斥访问共享资源的一种手段,从而避免并行导致的结果不可控。基本的实现原理和单进程锁是一致的,通过一个共享标识来确定唯一性,对共享标识进行修改时能够...

郑加威
今天
1
0
Mac OS X下Maven的安装与配置

Mac OS X 安装Maven: 下载 Maven, 并解压到某个目录。例如/Users/robbie/apache-maven-3.3.3 打开Terminal,输入以下命令,设置Maven classpath $ vi ~/.bash_profile 添加下列两行代码,之后...

TonyStarkSir
今天
3
0
关于编程,你的练习是不是有效的?

最近由于工作及Solution项目的影响,我在重新学习DDD和领域建模的一些知识。然后,我突然就想到了这个问题,以及我是怎么做的? 对于我来说,提升技能的项目会有四种: 纯兴趣驱动的项目。即...

问题终结者
今天
4
0
打开eclipse出现an error has occurred see the log file

解决方法: 1,打开eclipse安装目录下的eclipse.ini文件; 2,打开的文本文件最后添加一行 --add-modules=ALL-SYSTEM 3,保存重新打开Eclipse。...

任梁荣
昨天
4
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部