问题
在thinkphp6中,对于think-queue超时的设置,官方并没有说的太清楚。在实际应用中我们发现了超时设置超过60s不生效的问题。导致queue的job被重复消费。
我们的项目部署在k8s中,且开启了多副本导致,如:A、B。当启动think-queue,并指定超时时间
php think queue:listen --timeout 180 --queue test
假设任务1需要执行100秒,在A中processing任务1的时候,当任务1运行已经超过了60s,这时候在B中会重新启动任务1。这是由于在queue.php中配置了redis
return [
'default' => 'redis',
'connections' => [
'redis' => [
'type' => 'redis',
'queue' => 'default',
'host' => '127.0.0.1',
'port' => 6379,
'password' => '',
'select' => 0,
'timeout' => 0,
'persistent' => false,
],
]
];
而redis作为connector,在think-queue中被指定了默认超时重试时间=60s,导致了重复消费的问题,位于think-queue\src\queue\connector\Redis.php
protected $retryAfter = 60;
public function __construct($redis, $default = 'default', $retryAfter = 60, $blockFor = null)
{
$this->redis = $redis;
$this->default = $default;
$this->retryAfter = $retryAfter;
$this->blockFor = $blockFor;
}
解决方法
在queue.php中配置参数retry_after=180(想要指定的超时时间)
'redis' => [
'type' => 'redis',
'queue' => 'default',
'host' => '127.0.0.1',
'port' => 6379,
'password' => '',
'select' => 0,
'timeout' => 0,
'persistent' => false,
'retry_after' => 180,
],
总结
1、config/queue.php中connections.redis增加参数:'retry_after' => 180
2、php think命令增加参数:--timeout 180