bullmq vs bull vs agenda vs bee-queue vs kue
Node.js 任务队列库
搜索包...
bullmqbullagendabee-queuekue类似的npm包:
Node.js 任务队列库

任务队列库用于处理异步任务，允许开发者将任务放入队列中，并在后台处理这些任务。这些库通常用于处理需要延迟执行或需要高并发处理的任务，如发送电子邮件、处理图像或执行定时任务。它们提供了可靠的任务管理和调度机制，确保任务的顺序和成功执行。

npm下载趋势
3 年
GitHub Stars 排名
统计详情
npm包名称
下载量
Stars
大小
Issues
发布时间
License
bullmq2,139,1488,0052.27 MB3054 天前MIT
bull1,119,92216,183309 kB1481 年前MIT
agenda136,7119,585353 kB356-MIT
bee-queue36,4813,994106 kB362 年前MIT
kue18,8859,458-2889 年前MIT
功能对比: bullmq vs bull vs agenda vs bee-queue vs kue

存储后端

  • bullmq:

    BullMQ 也基于 Redis，提供更高级的功能和更好的性能，适合需要复杂任务管理的应用。

  • bull:

    Bull 同样使用 Redis 作为存储后端，支持复杂的任务处理和调度，适合需要高并发和高可靠性的场景。

  • agenda:

    Agenda 使用 MongoDB 作为存储后端，适合需要持久化和查询功能的应用。它可以存储任务的状态和调度信息，便于管理和监控。

  • bee-queue:

    Bee-Queue 使用 Redis 作为存储后端，提供高性能的任务队列，适合处理大量短任务。它的设计简单，易于使用。

  • kue:

    Kue 使用 Redis 作为存储后端，提供简单的 API 和用户界面，适合需要快速实现任务队列的场景。

任务调度

  • bullmq:

    BullMQ 提供更高级的任务调度功能，支持工作流和事件驱动的任务处理，适合需要复杂调度的应用。

  • bull:

    Bull 提供丰富的任务调度功能，包括延迟任务、优先级和重试机制，适合复杂的任务处理需求。

  • agenda:

    Agenda 提供简单的任务调度功能，支持定时任务和周期性任务，适合需要定期执行的任务场景。

  • bee-queue:

    Bee-Queue 主要用于处理即时任务，不支持定时调度，适合需要快速处理的任务。

  • kue:

    Kue 提供基本的任务调度功能，支持优先级和失败重试，适合简单的任务处理场景。

监控与管理

  • bullmq:

    BullMQ 提供更高级的监控和管理功能，支持工作流监控，适合复杂应用的需求。

  • bull:

    Bull 提供强大的监控和管理工具，可以实时查看任务状态，适合需要高可视化的应用。

  • agenda:

    Agenda 提供基本的监控功能，但缺乏图形化界面，适合开发者使用。

  • bee-queue:

    Bee-Queue 提供简单的监控功能，适合快速开发和调试。

  • kue:

    Kue 提供直观的用户界面，可以实时监控任务状态，适合需要可视化管理的场景。

学习曲线

  • bullmq:

    BullMQ 的学习曲线相对较陡，功能复杂，适合需要高级功能的开发者。

  • bull:

    Bull 的学习曲线稍陡，功能丰富，适合有一定经验的开发者。

  • agenda:

    Agenda 的学习曲线较平缓，API 简单易懂，适合初学者使用。

  • bee-queue:

    Bee-Queue 的学习曲线也较平缓，设计简单，易于上手。

  • kue:

    Kue 的学习曲线较平缓，API 简单，适合快速实现任务队列的场景。

性能

  • bullmq:

    BullMQ 性能更强，适合需要更高吞吐量的应用。

  • bull:

    Bull 性能优越，支持高并发任务处理，适合复杂应用。

  • agenda:

    Agenda 的性能依赖于 MongoDB 的性能，适合中小型应用。

  • bee-queue:

    Bee-Queue 具有极高的性能，适合处理大量短任务。

  • kue:

    Kue 性能良好，适合中小型应用的任务处理。

如何选择: bullmq vs bull vs agenda vs bee-queue vs kue
  • bullmq:

    选择 BullMQ 如果你需要 Bull 的增强版，支持更高级的功能，如工作流和事件驱动的任务处理，适合需要更复杂的任务管理和调度的应用。

  • bull:

    选择 Bull 如果你需要一个功能丰富的任务队列，支持优先级、延迟和重试机制，适合复杂的任务处理场景，并且希望有良好的监控和管理工具。

  • agenda:

    选择 Agenda 如果你需要一个基于 MongoDB 的轻量级任务调度器，适合定时任务和周期性任务的管理，并且希望使用简单的 API 来处理任务调度。

  • bee-queue:

    选择 Bee-Queue 如果你需要一个快速且简单的任务队列，适合处理大量的短任务，并且希望利用 Redis 的高性能特性。

  • kue:

    选择 Kue 如果你需要一个简单易用的任务队列，支持优先级和失败重试，并且希望有一个直观的用户界面来监控任务状态。

与bullmq类似的npm包

bullmq 是一个用于 Node.js 的高性能任务和作业队列库。它是 Bull 的下一代版本，旨在提供更好的性能和更丰富的功能。BullMQ 支持先进的队列管理功能，如优先级、延迟作业、重复作业和事件监听等，适合需要处理大量异步任务的应用程序。虽然 BullMQ 提供了强大的功能，但在 Node.js 生态系统中还有其他一些任务队列库可以作为替代方案。以下是一些替代库：

  • agenda 是一个轻量级的任务调度库，基于 MongoDB。它允许开发者使用简单的 API 定义和调度作业。Agenda 适合需要定期执行任务的应用程序，例如定时任务或周期性作业。由于其基于 MongoDB 的特性，Agenda 可以轻松地与使用 MongoDB 的应用程序集成。
  • bee-queue 是一个简单且高效的任务队列库，专注于快速和简单的使用体验。它适用于需要处理大量短期作业的应用程序。Bee-Queue 的设计目标是尽可能简单，因此它没有 BullMQ 那样复杂的功能，但对于许多基本的任务队列需求来说，它已经足够强大。
  • bull 是 BullMQ 的前身，也是一个广泛使用的任务和作业队列库。Bull 提供了许多强大的功能，如优先级、延迟作业和重复作业等。虽然 BullMQ 是其进化版本，但 Bull 仍然是一个稳定且功能丰富的选择，适合各种规模的应用程序。
  • kue 是一个基于 Redis 的任务队列库，提供了一个简单的 API 来创建和处理作业。Kue 支持优先级、延迟和重试等功能，适合需要处理异步任务的应用程序。尽管 Kue 在过去非常流行，但它的维护更新相对较少，可能不如 BullMQ 和 Bull 那样活跃。

要查看这些库之间的比较，请访问：比较 agenda vs bee-queue vs bull vs bullmq vs kue。

与bull类似的npm包

bull 是一个用于 Node.js 的高性能任务和消息队列库。它基于 Redis 构建，能够处理大量的任务和作业，适合需要高并发和高可靠性的应用程序。Bull 提供了丰富的功能，包括任务重试、延迟任务、优先级队列等，使得开发者能够轻松管理和调度任务。尽管 Bull 是一个强大的选择，但在 Node.js 生态系统中，还有其他一些替代库可供选择。以下是几个替代方案：

  • agenda 是一个轻量级的任务调度库，使用 MongoDB 作为数据存储。它允许开发者使用简单的 API 定义和调度任务，适合需要定时任务或周期性任务的应用。Agenda 的灵活性和易用性使其成为小型到中型项目的理想选择。
  • bee-queue 是一个简单且高效的任务队列库，专为处理大量短任务而设计。与 Bull 类似，bee-queue 也基于 Redis，但它的重点是提供更简单的 API 和更快的性能，适合需要快速处理任务的场景。
  • bullmq 是 Bull 的下一代版本，提供了更强大的功能和更好的性能。它支持更复杂的任务管理和调度，适合需要更高灵活性和可扩展性的应用程序。BullMQ 还引入了更好的类型支持和更丰富的 API，使得开发者能够更轻松地管理任务。
  • kue 是一个基于 Redis 的优先级任务队列库，提供了丰富的功能，包括任务重试、优先级管理和实时监控。虽然 Kue 的功能强大，但它的维护更新相对较少，可能不如 Bull 和其他库那么活跃。
  • node-resque 是一个用于 Node.js 的任务队列库，支持多种后端存储，包括 Redis 和 MongoDB。它提供了灵活的任务调度和处理机制，适合需要多种存储选项和复杂任务管理的应用。

要查看这些库之间的比较，请访问：Comparing agenda vs bee-queue vs bull vs bullmq vs kue vs node-resque。

与agenda类似的npm包

agenda 是一个用于 Node.js 的轻量级任务调度库。它允许开发者使用 MongoDB 来存储和调度任务，提供了一种简单而灵活的方式来处理定时任务和后台作业。虽然 agenda 提供了强大的任务调度功能，但在 Node.js 生态系统中还有其他库可以作为替代方案。以下是一些替代库：

  • bull 是一个功能强大的任务和消息队列库，基于 Redis 构建。它支持优先级、延迟和重复任务等高级功能，非常适合需要处理大量任务的应用程序。Bull 的设计旨在提供高性能和可靠性，尤其适合需要处理复杂工作流和任务调度的场景。如果你的应用需要高吞吐量和强大的任务管理功能，Bull 是一个理想的选择。
  • node-schedule 是一个基于 cron 表达式的任务调度库，允许开发者在 Node.js 中轻松地安排定时任务。它的 API 简单易用，适合需要在特定时间或间隔执行任务的应用。与 agenda 和 bull 不同，node-schedule 更加专注于简单的定时任务调度，而不是任务队列或后台作业处理。如果你的需求主要是定时执行任务，node-schedule 是一个不错的选择。

要查看 agenda 与 bull 和 node-schedule 的比较，请访问：比较 agenda vs bull vs node-schedule。

与bee-queue类似的npm包

bee-queue 是一个轻量级的任务队列库，专为 Node.js 应用程序设计。它使用 Redis 作为后端存储，提供了简单易用的 API 来处理异步任务和作业队列。虽然 bee-queue 提供了高效的任务处理解决方案，但还有其他一些库可以作为替代方案。以下是几个替代库：

  • agenda 是一个基于 MongoDB 的任务调度库，适用于 Node.js 应用程序。它允许开发者轻松地安排和管理定时任务，支持重复执行和延迟执行等功能。如果你的应用需要复杂的调度功能，agenda 是一个不错的选择。
  • bull 是一个功能强大的任务和作业队列库，同样使用 Redis 作为存储后端。与 bee-queue 相比，bull 提供了更多的功能，如优先级、延迟任务、重试机制等。bull 非常适合需要高性能和复杂任务处理的应用程序。
  • kue 是另一个基于 Redis 的任务队列库，提供了丰富的功能和可视化界面。kue 允许你轻松地创建、管理和监控作业，适合需要可视化和管理功能的应用程序。尽管 kue 功能强大，但它的复杂性可能不适合所有项目。
  • p-queue 是一个轻量级的承诺队列库，适用于 Node.js 和浏览器环境。与其他库不同，p-queue 专注于限制并发执行的任务数量，适合需要控制并发的场景。它的 API 简洁，易于使用。

要查看 bee-queue 与其他库的比较，请访问：比较 agenda vs bee-queue vs bull vs kue vs p-queue。

与kue类似的npm包

kue 是一个用于 Node.js 的优雅的作业队列库，专注于处理异步任务。它提供了一个简单的 API 来创建和管理作业，支持优先级、延迟和重试等功能。虽然 kue 提供了强大的作业队列解决方案，但在 Node.js 生态系统中还有其他库可以作为替代方案。以下是一些替代品：

  • agenda 是一个基于 MongoDB 的作业调度库，允许开发者使用简单的语法来定义和调度作业。它支持重复作业、延迟作业和作业优先级等功能，适合需要灵活调度的应用程序。如果你的应用程序已经在使用 MongoDB，并且需要一个简单的作业调度解决方案，agenda 是一个不错的选择。
  • bee-queue 是一个轻量级的作业队列库，专注于速度和简单性。它使用 Redis 作为后端存储，提供了一个简单的 API 来处理作业。bee-queue 适合需要高性能和低延迟的应用程序，尤其是在处理大量短时间作业时。
  • bree 是一个现代的作业调度库，支持使用 Node.js 的原生工作线程。它允许开发者轻松地调度和管理作业，同时充分利用 Node.js 的并发能力。bree 适合需要高并发和高性能的应用程序，尤其是在处理 CPU 密集型任务时。
  • bull 是一个功能强大的作业和消息队列库，基于 Redis 构建。它提供了丰富的功能，如优先级、延迟、重复作业和事件监听，适合需要复杂作业管理的应用程序。bull 的强大功能和灵活性使其成为处理大规模作业的理想选择。
  • node-resque 是一个基于 Redis 的作业队列库，灵感来自于 Ruby 的 Resque。它支持多种后端和多种作业类型，适合需要灵活性和可扩展性的应用程序。node-resque 允许开发者使用多种方式来处理作业，适合需要高度自定义的场景。

要查看 kue 与其他库的比较，请访问：比较 agenda vs bee-queue vs bree vs bull vs kue vs node-resque。

bullmq的README



The fastest, most reliable, Redis-based distributed queue for Node.
Carefully written for rock solid stability and atomicity.

Read the documentation

Follow @manast for *important* Bull/BullMQ/BullMQ-Pro news and updates!

🛠 Tutorials

You can find tutorials and news in this blog: https://blog.taskforce.sh/

News 🚀

🌐 Language agnostic BullMQ

Do you need to work with BullMQ on platforms other than Node.js? If so, check out the BullMQ Proxy

Official FrontEnd

Taskforce.sh, Inc

Supercharge your queues with a professional front end:

  • Get a complete overview of all your queues.
  • Inspect jobs, search, retry, or promote delayed jobs.
  • Metrics and statistics.
  • and many more features.

Sign up at Taskforce.sh

🚀 Sponsors 🚀

Dragonfly Dragonfly is a new Redis™ drop-in replacement that is fully compatible with BullMQ and brings some important advantages over Redis™ such as massive better performance by utilizing all CPU cores available and faster and more memory efficient data structures. Read more here on how to use it with BullMQ.

Used by

Some notable organizations using BullMQ:

Microsoft Vendure Datawrapper Nest Langfuse
Curri Novu NoCodeDB Infisical

The gist

Install:

$ yarn add bullmq

Add jobs to the queue:

import { Queue } from 'bullmq';

const queue = new Queue('Paint');

queue.add('cars', { color: 'blue' });

Process the jobs in your workers:

import { Worker } from 'bullmq';

const worker = new Worker('Paint', async job => {
  if (job.name === 'cars') {
    await paintCar(job.data.color);
  }
});

Listen to jobs for completion:

import { QueueEvents } from 'bullmq';

const queueEvents = new QueueEvents('Paint');

queueEvents.on('completed', ({ jobId }) => {
  console.log('done painting');
});

queueEvents.on(
  'failed',
  ({ jobId, failedReason }: { jobId: string; failedReason: string }) => {
    console.error('error painting', failedReason);
  },
);

Adds jobs with parent-child relationship:

import { FlowProducer } from 'bullmq';

const flow = new FlowProducer();

const originalTree = await flow.add({
  name: 'root-job',
  queueName: 'topQueueName',
  data: {},
  children: [
    {
      name: 'child-job',
      data: { idx: 0, foo: 'bar' },
      queueName: 'childrenQueueName',
      children: [
        {
          name: 'grandchild-job',
          data: { idx: 1, foo: 'bah' },
          queueName: 'grandChildrenQueueName'
        },
        {
          name: 'grandchild-job',
          data: { idx: 2, foo: 'baz' },
          queueName: 'grandChildrenQueueName'
        },
      ],
    },
    {
      name: 'child-job',
      data: { idx: 3, foo: 'foo' },
      queueName: 'childrenQueueName'
    },
  ],
});

This is just scratching the surface, check all the features and more in the official documentation

Feature Comparison

Since there are a few job queue solutions, here is a table comparing them:

FeatureBullMQ-ProBullMQBullKueBeeAgenda
Backendredisredisredisredisredismongo
Observables✓
Group Rate Limit✓
Group Support✓
Batches Support✓
Parent/Child Dependencies✓✓
Deduplication (Debouncing)✓✓✓
Deduplication (Throttling)✓✓✓
Priorities✓✓✓✓✓
Concurrency✓✓✓✓✓✓
Delayed jobs✓✓✓✓✓
Global events✓✓✓✓
Rate Limiter✓✓✓
Pause/Resume✓✓✓✓
Sandboxed worker✓✓✓
Repeatable jobs✓✓✓✓
Atomic ops✓✓✓✓
Persistence✓✓✓✓✓✓
UI✓✓✓✓✓
Optimized forJobs / MessagesJobs / MessagesJobs / MessagesJobsMessagesJobs

Contributing

Fork the repo, make some changes, submit a pull-request! Here is the contributing doc that has more details.

Thanks

Thanks for all the contributors that made this library possible, also a special mention to Leon van Kammen that kindly donated his npm bullmq repo.

npm-compare.com is an independent website designed to help developers choose the most suitable npm packages. We are not affiliated with npm, Inc, the official website for the npm registry. Note that npm is a registered trademark of npm, Inc. Please share your feedback via our GitHub repository. For more details, please refer to our Terms & Privacy.