队列
简介
Laravel 的队列服务为不同的队列后端系统提供了一套统一的 API 。队列允许你将一个耗时的任务进行延迟处理,例如像 e-mail 发送。这能让应用程序对 页面的请求有更快的响应。
配置
队列的配置文件被保存在 config/queue.php
中。在这个文件内你可以找到包含在 Laravel 中的每一种队列驱动连接设置。它们包含了数据库、Beanstalkd、IronMQ、Amazon SQS、Redis 以及提供本机使用的 synchronous 驱动。
另外框架也提供了 null
这个队列驱动用来丢弃队列任务。
驱动的必要设置
数据库
要使用 database
这个队列驱动的话,则需要创建一个数据表来记住任务,你可以用 queue:table
这个 Artisan 命令来创建这个数据表的迁移。当迁移建好后,就可以用 migrate
这个命令来创建数据表。
php artisan queue:table
php artisan migrate
其它队列系统的依赖扩展包
在使用列表里的队列服务前,必须安装以下依赖扩展包:
- Amazon SQS:
aws/aws-sdk-php ~3.0
- Beanstalkd:
pda/pheanstalk ~3.0
- IronMQ:
iron-io/iron_mq ~2.0|~4.0
- Redis:
predis/predis ~1.0
编写任务类
生成任务类
在你的应用程序中,队列的任务类都默认放在 app/Jobs
目录下,你可以用以下的 Artisan 命令来生成一个新的队列任务:
php artisan make:job SendReminderEmail --queued
这个命令将会在 app/Jobs
下生成一个新的类,而这个类会实现 Illuminate\Contracts\Queue\ShouldQueue
接口,让 Laravel 知道这个任务应该是被放到队列里的,而不是要直接运行。
任务类结构
任务类的结构很简单,一般来说只会包含一个让队列用来调用此任务的 handle
方法。我们用以下这个类来做示范:
<?php
namespace App\Jobs;
use App\User;
use App\Jobs\Job;
use Illuminate\Contracts\Mail\Mailer;
use Illuminate\Queue\SerializesModels;
use Illuminate\Queue\InteractsWithQueue;
use Illuminate\Contracts\Bus\SelfHandling;
use Illuminate\Contracts\Queue\ShouldQueue;
class SendReminderEmail extends Job implements SelfHandling, ShouldQueue
{
use InteractsWithQueue, SerializesModels;
protected $user;
/**
* 创建一个新的任务实例。
*
* @param User $user
* @return void
*/
public function __construct(User $user)
{
$this->user = $user;
}
/**
* 运行任务。
*
* @param Mailer $mailer
* @return void
*/
public function handle(Mailer $mailer)
{
$mailer->send('emails.reminder', ['user' => $this->user], function ($m) {
//
});
$this->user->reminders()->create(...);
}
}
注意,在这个例子中,我们在任务类的构造器中直接传递了一个 Eloquent 模型。因为我们在任务类里引用了 SerializesModels
这个 trait,使得 Eloquent 模型在处理任务时可以被优雅地序列化和反序列化。如果你的队列任务类在构造器中接收了一个 Eloquent 模型,那么只有可识别出该模型的属性会被序列化到队列里。当任务被实际运行时,队列系统便会自动从数据库中重新取回完整的模型。这整个过程对你的应用程序来说是完全透明的,这样可以避免在序列化完整的 Eloquent 模式实例时所带来的一些问题。
在队列处理任务时,会调用 handle
方法,而这里我们也可以通过 handle
方法的参数类型提示,让 Laravel 的 服务容器 自动注入依赖对象。
当发生错误的时候
如果在处理任务时抛出了一个异常,它将会自动被释放回队列里并再次尝试运行。当该任务一直出错时,它会不断被发布重试,直到超过应用程序所允许的最大重试值。最大重试值可以在运行 queue:listen
或 queue:work
命令时,用 --tries
选项来设置。关于运行队列侦听器的更多信息在稍后会有 详细说明。
手动释放任务
生成出来的任务类引用了 InteractsWithQueue
这个 trait,它提供了 release
方法让我们可以手动释放任务。在 release
方法中可指定一个参数,表示此任务被重新运行之前所等待的秒数。
public function handle(Mailer $mailer)
{
if (condition) {
$this->release(10);
}
}
检查重试次数
如前面所提到的,当任务被处理时若发生一些异常,则任务将会被自动释放回队列中。这时候可以用 attempts
方法来检查重试次数:
public function handle(Mailer $mailer)
{
if ($this->attempts() > 3) {
//
}
}
将任务推送到队列上
在 app/Http/Controllers/Controller.php
中 Laravel 定义了一个默认控制器,它引用了 DispatchesJob
这个 trait。而这个 trait 提供了数个方法来方便你推送任务到队列上,例如 dispatch
方法:
<?php
namespace App\Http\Controllers;
use App\User;
use Illuminate\Http\Request;
use App\Jobs\SendReminderEmail;
use App\Http\Controllers\Controller;
class UserController extends Controller
{
/**
* 发送提醒的 e-mail 给指定用户。
*
* @param Request $request
* @param int $id
* @return Response
*/
public function sendReminderEmail(Request $request, $id)
{
$user = User::findOrFail($id);
$this->dispatch(new SendReminderEmail($user));
}
}
当然有时候你不一定是从应用程序的路由或控制器来派发任务的,因此你可以在应用程序中的任何类里引用 DispatchesJobs
这个 trait ,以便使用它的各种派发方法。以下就是使用该 trait 的类:
<?php
namespace App;
use Illuminate\Foundation\Bus\DispatchesJobs;
class ExampleClass
{
use DispatchesJobs;
}
指定任务所属的队列
你可以指定任务应该要送到哪一个队列上。
要推送任务到不同的队列上,你需要将任务先「分类」,甚至可能要指定每个队列能有多少作业器可以运行任务。这并不会推送任务到你在配置文件中所定义的不同队列「连接」上,而是会推送到某个有单个连接的队列。要指定任务运行的队列,可以用任务实例的 onQueue
方法。onQueue
是 Illuminate\Bus\Queueable
trait 所提供的方法,而它已经包含在 App\Jobs\Job
基类中:
<?php
namespace App\Http\Controllers;
use App\User;
use Illuminate\Http\Request;
use App\Jobs\SendReminderEmail;
use App\Http\Controllers\Controller;
class UserController extends Controller
{
/**
* 发送提醒的 e-mail 给指定用户。
*
* @param Request $request
* @param int $id
* @return Response
*/
public function sendReminderEmail(Request $request, $id)
{
$user = User::findOrFail($id);
$job = (new SendReminderEmail($user))->onQueue('emails');
$this->dispatch($job);
}
}
延迟性任务
有时你可能会希望队列任务能晚一点再运行,例如在用户注册 15 分钟后才通过队列任务发送提醒信件。这可以通过任务类引用的 Illuminate\Bus\Queueable
这个 trait 所提供的 delay
方法来实现:
<?php
namespace App\Http\Controllers;
use App\User;
use Illuminate\Http\Request;
use App\Jobs\SendReminderEmail;
use App\Http\Controllers\Controller;
class UserController extends Controller
{
/**
* 发送提醒的 e-mail 给指定用户。
*
* @param Request $request
* @param int $id
* @return Response
*/
public function sendReminderEmail(Request $request, $id)
{
$user = User::findOrFail($id);
$job = (new SendReminderEmail($user))->delay(60);
$this->dispatch($job);
}
}
在这个例子里,我们指定该任务延迟 60 秒后再运行。
Amazon 的 SQS 服务最大的延迟时间是 15 分钟。
从请求中派送任务
Laravel 提供了一些辅助函数以方便你在任务中对应 HTTP 请求的变量。像是在 DispatchesJobs
这个 trait 就提供了 dispatchFrom
方法,而 Laravel 基础控制器已经默认引入了这个 trait:
<?php
namespace App\Http\Controllers;
use Illuminate\Http\Request;
use App\Http\Controllers\Controller;
class CommerceController extends Controller
{
/**
* 处理指定的订单。
*
* @param Request $request
* @param int $id
* @return Response
*/
public function processOrder(Request $request, $id)
{
// 处理该请求...
$this->dispatchFrom('App\Jobs\ProcessOrder', $request);
}
}
这个方法会检查任务类的构造器,并且从 HTTP 请求 (或任何 ArrayAccess
对象) 中取出变量,来作为构造器中需要的参数。所以如果我们的任务类构造器接受一个 productId
变量的话,那么队列就会试着从 HTTP 请求中提取 productId
这个参数。
你也可以直接将一个数组传入到 dispatchFrom
方法的第三个参数里,这个数组会被用来作为构造器中所有不在请求里的变量:
$this->dispatchFrom('App\Jobs\ProcessOrder', $request, [
'taxPercentage' => 20,
]);
任务事件
任务完成事件
Queue::after
方法可以让你注册一个队列任务运行完成后会被执行的回调。在此回调进行额外纪录、队列后续任务、或为仪表板增加统计等操作都是很好的时机。举个例子,我们可以在 Laravel 所包含的 AppServiceProvider
中附加一个回调到此事件上:
<?php
namespace App\Providers;
use Queue;
use Illuminate\Support\ServiceProvider;
class AppServiceProvider extends ServiceProvider
{
/**
* 启动所有应用程序服务。
*
* @return void
*/
public function boot()
{
Queue::after(function ($connection, $job, $data) {
//
});
}
/**
* 注册服务提供者。
*
* @return void
*/
public function register()
{
//
}
}
运行队列侦听器
启动队列侦听器
Laravel 引入了一个 Artisan 命令,用来运行被推送到队列里的任务。你可以通过 queue:listen
命令来运行侦听器:
php artisan queue:listen
你也可以指定侦听器应该利用哪一个队列进行连接:
php artisan queue:listen connection
要注意的是,在这个工作命令启动后,它将会继续运行直到被手动停止为止。你可以利用像 Supervisor 这样的进程监控软件,来确保队列侦听器 不会停止运行。
队列优先顺序
你可以给 listen
命令一个以逗号分隔的队列连接列表,来设置队列的优先顺序:
php artisan queue:listen --queue=high,low
在这个例子里,在 high
这个队列中的任务永远会先被处理,然后才是 low
队列里的任务。
指定任务的超时参数
你还可以设置每个任务被允许运行的时间长度,单位是秒数:
php artisan queue:listen --timeout=60
指定队列的休眠期
此外,你也可以指定队列 要等待多少秒后才能取新的任务来运行:
php artisan queue:listen --sleep=5
注意这里是指队列在没有任务的状态下才会休眠。如果已经有多个任务卡在这个队列上,那么它会持续运行而不会休眠。
Supervisor 设置
Supervisor 是一个 Linux 操作系统上的进程监控软件,它会在 queue:listen
或 queue:work
命令发生失败后自动重启它们。 要在 Ubuntu 安装 Supervisor,可以用以下命令:
sudo apt-get install supervisor
Supervisor 的配置文件一般是放在 /etc/supervisor/conf.d
目录下,在这个目录中你可以创建任意数量的配置文件来要求 Supervisor 监控你的进程。例如我们创建一个 laravel-worker.conf
来启动与监控一个 queue:work
进程:
[program:laravel-worker]
process_name=%(program_name)s_%(process_num)02d
command=php /home/forge/app.com/artisan queue:work sqs --sleep=3 --tries=3 --daemon
autostart=true
autorestart=true
user=forge
numprocs=8
redirect_stderr=true
stdout_logfile=/home/forge/app.com/worker.log
这个例子里的 numprocs
命令会要求 Supervisor 运行并监控 8 个 queue:work
进程,并且在它们运行失败后重新启动。当然,你必须更改 command
命令的 queue:work sqs
,以显示你所选择的队列驱动。
当这个配置文件被创建后,你需要更新 Supervisor 的设置,并用以下命令来启动该进程:
sudo supervisorctl reread
sudo supervisorctl update
sudo supervisorctl start laravel-worker:*
更多有关 Supervisor 的设置与使用,请参考 Supervisor 官方文档。或是使用 Laravel Forge 所提供的 Web 接口,来自动设置与管理你的 Supervisor 设置。