首页 > 解决方案 > NestJS 分离队列

问题描述

根据文档NestJS Docs有两种实现队列的方法。使用 redis 和命名或未命名的队列,例如这里:Queue Redis Example或这里Queue Redis Example 2和在带有处理器的单独进程中运行的队列。

我最近尝试在单独的进程中实现此处发现的第二种方式队列,但我的处理器未被识别,最终得到:

错误信息

有没有人可以帮助我并提供一个最小的工作示例?

我看到已经有一个最近打开的问题:Queues Processes Docs Issue,但是如果有人可以帮助我或提供的线程中的这个人,我可以进行 PR 或官方维护人员可以这样做。

提前致谢!最好的问候拉吉塔哈

标签: typescriptmultithreadingnestjstask-queue

解决方案


NestJS 公牛包是公牛的很好的包装器,它为在单独的进程中运行的作业提供支持。

要利用公牛自动分叉处理,您只需提供可以充当作业处理器的文件的路径。

创建要用于运行作业的单独文件

import { Logger } from '@nestjs/common';
import { DoneCallback, Job } from 'bull';

export default function (job: Job<{ message: string }>, cb: DoneCallback) {
  Logger.verbose(`${job.data.message} (pid ${process.pid})`, `SEPARATE`);
  cb(null, 'Hurrah');
}

请记住,此文件需要能够自行运行。当然,您可以添加额外的导入等,但它将在不同的进程中运行,因此您的应用程序及其资源将不可用。

注册队列时,指定单独文件的路径。在这里,我注册了 2 个队列。一种在与应用程序相同的进程中运行,另一种将在单独的进程中运行

@Module({
  imports: [
    // register root
    BullModule.forRoot({
      redis: {
        host: 'localhost',
        port: 6379,
      },
    }),
    // register queues
    BullModule.registerQueue(
      {
        name: 'SAME', // this will run in same process as this module
      },
      {
        name: 'SEPARATE', // this will run in its own process
        processors: [join(__dirname, 'separate.process')],
      },
    ),
  ],
  controllers: [AppController],
  providers: [SameService],
})
export class AppModule {}

然后你可以正常解雇工作。下面我将一个作业发送到应用程序进程中的队列,然后将另一个作业发送到单独的文件中

@Controller()
export class AppController {
  constructor(
    @InjectQueue('SAME') private readonly same: Queue,
    @InjectQueue('SEPARATE') private readonly separate: Queue,
  ) {}

  @Get()
  getHello(): string {

    // Example of adding a job processed in same thread
    this.same.add({ message: 'Knock knock.' });

    // Example of adding a job processed in separate thread
    this.separate.add({ message: 'FORK OFF.' });

    return 'ok';
  }
}

localhost:3000 然后输出

[Nest] 13400   - 08/05/2021, 16:49:18   [SAME] Knock knock. (pid 13400) +8821ms
[Nest] 2660   - 08/05/2021, 16:49:19   [SEPARATE] FORK OFF. (pid 2660)

这是回购的链接

希望这可以帮助!


推荐阅读