Laravel使用Queue队列的技巧汇总
前言
Laravel队列为不同的后台队列服务提供统一的API,例如Beanstalk,AmazonSQS,Redis,甚至其他基于关系型数据库的队列。队列的目的是将耗时的任务延时处理,比如发送邮件,从而大幅度缩短Web请求和相应的时间。
队列配置文件存放在config/queue.php。每一种队列驱动的配置都可以在该文件中找到,包括数据库,Beanstalkd,AmazonSQS,Redis,以及同步(本地使用)驱动。其中还包含了一个null队列驱动用于那些放弃队列的任务
为什么使用队列?
一般来说使用队列是为了:
异步
重试
也许你还有其他的理由使用队列,但是这应该是最基本的两个原因。
什么情况使用队列?
了解了为什么使用队列,那么一般有这么几类任务使用队列:
耗时比较久的,比如上传一个文件后进行一些格式的转化等。
需要保证送达率的,比如发送短信,因为要调用别人的api,总会有几率失败,那么为了保证送达,重试就必不可少了。
使用队列的时候一定要想明白一个问题,这个任务到底是不是可以异步,如果因为异步会导致问题,那么就要放弃使用队列。
驱动的必要设置
database.php
在database.php配置文件中对redis数据库部分进行配置,默认有一个default连接,就用这个好了:)
根据这个默认连接中需要的配置项,编辑.env配置文件,将其中的REDIS_HOST、REDIS_PASSWORD、REDIS_PORT填写成自己服务器中Redis的相应值。
queue.php
首先需要去.env中配置QUEUE_DRIVER,因为现在打算用Redis,所以配置成redis。
接着配置queue.php里connections部分的redis连接,其中connection对应的值就是database.php中redis的那个default连接。
数据库
要使用database这个队列驱动的话,你需要创建一个数据表来存储任务。你可以用queue:table这个Artisan
phpartisanqueue:table
处理失败的任务
有时候你队列中的任务会失败。不要担心,本来事情就不会一帆风顺。
Laravel内置了一个方便的方式来指定任务重试的最大次数。当任务超出这个重试次数后,它就会被插入到failed_jobs数据表里面。要创建failed_jobs表的迁移文件,你可以用queue:failed-table命令,接着使用migrateArtisan命令生成failed_jobs表:
phpartisanqueue:failed-table
命令来创建这个数据表的迁移。当迁移创建好以后,就可以用migrate这条命令来创建数据表:
phpartisanmigrate
执行命令讲解
phpartisanqueue:work--daemon--quiet--queue=default--delay=3--sleep=3--tries=3
--daemon
Thequeue:workArtisancommandincludesa--daemonoptionforforcingthequeueworkertocontinueprocessingjobswithouteverre-bootingtheframework.ThisresultsinasignificantreductionofCPUusagewhencomparedtothequeue:listencommand
总体来说,在supervisor中一般要加这个option,可以节省CPU使用。
--quiet
不输出任何内容
--delay=3
一个任务失败后,延迟多长时间后再重试,单位是秒。这个值的设定我个人建议不要太短,因为一个任务失败(比如网络原因),重试时间太短可能会出现连续失败的情况。
--sleep=3
去Redis中拿任务的时候,发现没有任务,休息多长时间,单位是秒。这个值的设定要看你的任务是否紧急,如果是那种非常紧急的任务,不能等待太长时间。
--tries=3
定义失败任务最多重试次数。这个值的设定根据任务的重要程度来确定,一般3次比较适合。
创建任务
生成任务类
在你的应用程序中,队列的任务类都默认放在app/Jobs目录下。如果这个目录不存在,那当你运行make:jobArtisan命令时目录就会被自动创建。你可以用以下的Artisan命令来生成一个新的队列任务:
phpartisanmake:jobDemo
生成的类实现了Illuminate\Contracts\Queue\ShouldQueue接口,这意味着这个任务将会被推送到队列中,而不是同步执行。
param=$param; } /** *Executethejob. * *@returnvoid */ publicfunctionhandle() { Log::info('Hello,'.$this->param); } }
控制器代码
publicfunctionqueue_demo() { $num=rand(1,999999999); //这个任务将被分发到默认队列... DemoJob::dispatch($num); }
开启队列
phpartisanqueue:work--queue=default
由于是本地,需要打开监听,当访问到接口时,就会触发队列中的任务
线上的话需要用到supervisor的配置
Supervisor配置
安装Supervisor
Supervisor是一个Linux操作系统上的进程监控软件,它会在queue:listen或queue:work命令发生失败后自动重启它们。在Ubuntu安装Supervisor,可以用以下命令:
sudoapt-getinstallsupervisor
{tip}如果自己手动配置Supervisor听起来有点难以应付,可以考虑使用LaravelForge,它能给你的Laravel项目自动安装与配置Supervisor。
配置Supervisor
Supervisor的配置文件一般是放在/etc/supervisor/conf.d目录下。在这个目录中你可以创建任意数量的配置文件来要求Supervisor怎样监控你的进程。例如我们创建一个laravel-worker.conf来启动与监控一个queue:work进程:
[program:laravel-worker] process_name=%(program_name)s_%(process_num)02d command=php/home/forge/app.com/artisanqueue:worksqs--sleep=3--tries=3 autostart=true autorestart=true user=forge numprocs=8 redirect_stderr=true stdout_logfile=/home/forge/app.com/worker.log
这个例子里的numprocs命令会要求Supervisor运行并监控8个queue:work进程,并且在它们运行失败后重新启动。当然,你必须更改command命令的queue:worksqs,以显示你所选择的队列驱动。
启动Supervisor当这个配置文件被创建后,你需要更新Supervisor的配置,并用以下命令来启动该进程:
sudosupervisorctlreread sudosupervisorctlupdate sudosupervisorctlstartlaravel-worker:*
更多有关Supervisor的设置与使用,请参考Supervisor官方文档
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对毛票票的支持。