CentOS下安装beanstalkd服务

beanstalkd 一个高性能、轻量级的分布式内存队列系统,最初设计的目的是想通过后台异步执行耗时的任务来降低高容量Web应用系统的页面访问延迟,支持过有9.5 million用户的Facebook Causes应用。后来开源,之后有PostRank大规模部署和使用,每天处理百万级任务.


核心概念

Beanstalkd设计里面的核心概念:

◆ job

一个需要异步处理的任务,是Beanstalkd中的基本单元,需要放在一个tube中。

◆ tube

一个有名的任务队列,用来存储统一类型的job,是producer和consumer操作的对象。

◆ producer

Job的生产者,通过put命令来将一个job放到一个tube中。

◆ consumer

Job的消费者,通过reserve/release/bury/delete命令来获取job或改变job的状态。

Beanstalkd中一个job的生命周期如图所示。

一个job有READY, RESERVED, DELAYED, BURIED四种状态。

当producer直接put一个job时,job就处于READY状态,等待consumer来处理,

如果选择延迟put,job就先到DELAYED状态,等待时间过后才迁移到READY状态。

consumer获取了当前READY的job后,该job的状态就迁移到RESERVED,这样其他的consumer就不能再操作该job。

当consumer完成该job后,可以选择delete, release或者bury操作;

delete之后,job从系统消亡,之后不能再获取;

release操作可以重新把该job状态迁移回READY(也可以延迟该状态迁移操作),使其他的consumer可以继续获取和执行该job;

有意思的是bury操作,可以把该job休眠,等到需要的时候,再将休眠的job kick回READY状态,也可以delete BURIED状态的job。

正是有这些有趣的操作和状态,才可以基于此做出很多意思的应用,比如要实现一个循环队列,就可以将RESERVED状态的job休眠掉,等没有READY状态的job时再将BURIED状态的job一次性kick回READY状态。

104703_kotw_1412997.png


特性

Beanstalkd基于的源码安装和使用很简单,在此略过。这里重点介绍一下其几个很nice的特性。

◆ 优先级

支持0到2**32的优先级,值越小,优先级越高,默认优先级为1024。

◆ 持久化

可以通过binlog将job及其状态记录到文件里面,在Beanstalkd下次启动时可以通过读取binlog来恢复之前的job及状态。

◆ 分布式容错

分布式设计和Memcached类似,beanstalkd各个server之间并不知道彼此的存在,都是通过client来实现分布式以及根据tube名称去特定server获取job。

◆ 超时控制

为了防止某个consumer长时间占用任务但不能处理的情况,Beanstalkd为reserve操作设置了timeout时间,如果该consumer不能在指定时间内完成job,job将被迁移回READY状态,供其他consumer执行。

不足

在使用中发现一个Beanstalkd尚无提供删除一个tube的操作,只能将tube的job依次删除,并让Beanstalkd来自动删除空tube。还有就是Beanstalkd不支持客户端认证机制(开发者将应用场景定位在局域网)。


我们先安装epel

rpm -ivh http://mirror.digitalnova.at/epel/6/i386/epel-release-6-8.noarch.rpm

如果上面链接失效可以自己找个可用的

http://mirrors.fedoraproject.org/publiclist/EPEL/
yum install beanstalkd

添加用户组:

groupadd beanstalkd

添加用户:

adduser -M -g beanstalkd -s /sbin/nologin beanstalkd
-c<备注> 加上备注文字。备注文字会保存在passwd的备注栏位中。 
-d<登入目录> 指定用户登入时的启始目录。 
-D 变更预设值. 
-e<有效期限> 指定帐号的有效期限。 
-f<缓冲天数> 指定在密码过期后多少天即关闭该帐号。 
-g<群组> 指定用户所属的群组。 
-G<群组> 指定用户所属的附加群组。 
-m 自动建立用户的登入目录。 
-M 不要自动建立用户的登入目录。 
-n 取消建立以用户名称为名的群组. 
-r 建立系统帐号。 
-s<shell> 指定用户登入后所使用的shell。 
-u<uid> 指定用户ID。

添加启动脚本,放入 /etc/init.d/ 目录下

chmod 755 /etc/init.d/beanstalkd

开机启动

chkconfig beanstalkd on

如果供外部调用 就关闭防火墙或设置下端口

service iptables stop

开启服务

service beanstalkd start


转载于:https://my.oschina.net/xinson/blog/398718

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值