Изправен съм пред подобен проблем като теб. Има около 2-3 секунди закъснение при обработката на първото задание.
След като потърсих наоколо, открих, че laravel queue workerdefault 3 second sleep.
Което означава, че първото задание ще забави 3 секунди в по-лошия случай.
За да го разрешите, просто посочете --sleep=0, когато изпълнявате работния файл. Надявам се да помогне.
php artisan queue:worker --sleep=0