bullmq vs bull vs agenda vs bee-queue vs kue
ジョブキューライブラリ
パッケージを検索...
bullmqbullagendabee-queuekue類似パッケージ:
ジョブキューライブラリ

ジョブキューライブラリは、バックグラウンドでのタスク処理を管理するためのツールです。これらのライブラリは、非同期処理を効率的に行うために、タスクをキューに追加し、順次実行する機能を提供します。これにより、アプリケーションのパフォーマンスが向上し、ユーザー体験が向上します。特に、重い処理や時間のかかる操作をバックグラウンドで実行する際に役立ちます。

npmのダウンロードトレンド
3 年
GitHub Starsランキング
統計詳細
パッケージ
ダウンロード数
Stars
サイズ
Issues
公開日時
ライセンス
bullmq2,139,1488,0052.27 MB3054日前MIT
bull1,119,92216,183309 kB1481年前MIT
agenda136,7119,585353 kB356-MIT
bee-queue36,4813,994106 kB362年前MIT
kue18,8859,458-2889年前MIT
機能比較: bullmq vs bull vs agenda vs bee-queue vs kue

パフォーマンス

  • bullmq:

    BullMQは、Bullの機能を拡張しており、複雑なジョブフローを効率的に処理できます。パフォーマンスも向上しており、スケーラビリティが高いです。

  • bull:

    Bullは、Redisを使用しており、優れたパフォーマンスを提供します。特に、エラーハンドリングやリトライ機能が充実しているため、信頼性の高いジョブ処理が可能です。

  • agenda:

    Agendaは、MongoDBをバックエンドに使用するため、データベースのパフォーマンスに依存します。高トラフィックなアプリケーションでは、MongoDBのスケーラビリティが重要です。

  • bee-queue:

    Bee-Queueは、Redisのシンプルさとスピードを活かしており、高スループットのタスク処理に優れています。特に軽量なジョブ処理に最適です。

  • kue:

    Kueは、Redisを使用しており、ジョブの監視や管理が容易ですが、他のライブラリと比較してパフォーマンスが劣る場合があります。

選び方: bullmq vs bull vs agenda vs bee-queue vs kue
  • bullmq:

    BullMQは、Bullの進化版で、より高度な機能を提供します。複雑なジョブフローや依存関係を管理する必要がある場合に最適です。

  • bull:

    Bullは、Redisを使用した強力なジョブキューライブラリで、複雑なジョブの管理やリトライ機能が必要な場合に適しています。優れたエラーハンドリング機能を備えています。

  • agenda:

    Agendaは、MongoDBを使用したシンプルなジョブスケジューリングを必要とする場合に適しています。シンプルなAPIで、定期的なジョブや遅延ジョブを簡単に設定できます。

  • bee-queue:

    Bee-Queueは、Redisを使用した軽量なジョブキューを必要とする場合に最適です。シンプルで高速なパフォーマンスを提供し、特に高スループットのタスク処理に向いています。

  • kue:

    Kueは、Redisを使用したジョブキューライブラリで、ユーザーインターフェースを提供し、ジョブの監視や管理が容易です。視覚的な管理が必要な場合に適しています。

bullmqと類似したnpmパッケージ

bullmqは、Node.jsアプリケーション向けの強力なジョブおよびキュー管理ライブラリです。Redisをバックエンドとして使用し、効率的かつスケーラブルなジョブ処理を提供します。bullmqは、ジョブの優先順位、遅延、リトライ機能など、さまざまな機能をサポートしており、複雑なバックグラウンド処理を簡素化します。bullmqのユニークな点は、より高性能で柔軟なキュー管理を実現するために設計されていることです。しかし、bullmqにはいくつかの代替ライブラリも存在します。以下はそのいくつかです。

  • agendaは、MongoDBをバックエンドとして使用するジョブスケジューラです。シンプルで使いやすいAPIを提供し、定期的なタスクや遅延タスクのスケジューリングに適しています。agendaは、特にMongoDBを使用しているプロジェクトにおいて、簡単にジョブを管理したい場合に適した選択肢です。
  • bee-queueは、シンプルで軽量なジョブキューライブラリで、Redisをバックエンドとして使用します。bee-queueは、シンプルなAPIを提供し、ジョブの処理速度を重視して設計されています。特に、リアルタイム性が求められるアプリケーションや、軽量なキュー管理が必要な場合に適しています。
  • bullは、bullmqの前のバージョンであり、同様にRedisをバックエンドとして使用するジョブキューライブラリです。bullは、強力な機能を提供し、スケーラブルなジョブ処理を実現しますが、bullmqはその後継として、より多くの機能と改善を提供しています。bullを使用しているプロジェクトは、bullmqへの移行を検討する価値があります。
  • kueは、Node.js用のジョブおよびキュー管理ライブラリで、Redisをバックエンドとして使用します。kueは、ジョブの優先順位、リトライ機能、進捗の追跡など、豊富な機能を提供しますが、bullやbullmqに比べてやや古い設計となっています。kueは、特定のニーズに応じて使用されることがありますが、より新しいライブラリへの移行を考えることも重要です。

比較を確認するには、こちらをご覧ください: agenda vs bee-queue vs bull vs bullmq vs kueの比較。

bullと類似したnpmパッケージ

bullは、Node.jsアプリケーション向けの高性能なジョブおよびメッセージキューライブラリです。Redisをバックエンドとして使用し、ジョブの管理、スケジューリング、再試行、優先順位の設定など、さまざまな機能を提供します。bullは、特に高負荷のアプリケーションやバックグラウンド処理が必要なシステムに適しています。しかし、bullにはいくつかの代替ライブラリもあります。以下にいくつかの選択肢を紹介します。

  • agendaは、MongoDBをバックエンドに使用するジョブスケジューラです。シンプルなAPIを提供し、定期的なジョブのスケジューリングや、特定の条件に基づくジョブの実行を容易にします。MongoDBを使用しているプロジェクトに適しており、シンプルなタスクスケジューリングが必要な場合に便利です。
  • bee-queueは、シンプルで高速なジョブキューライブラリで、Redisをバックエンドに使用しています。特に低レイテンシーのジョブ処理を重視しており、簡単に使用できるAPIを提供します。軽量なジョブキューが必要な場合や、シンプルなタスク処理を行いたい場合に適しています。
  • bullmqは、bullの次世代版として設計されたジョブおよびメッセージキューライブラリです。bullの機能を引き継ぎつつ、より高いパフォーマンスと新しい機能を提供します。特に、複雑なジョブフローや大規模なアプリケーションに対応するために最適化されています。
  • kueは、Node.js用の優れたジョブおよびメッセージキューライブラリで、Redisをバックエンドに使用しています。ジョブの優先順位付けや進行状況の追跡、再試行などの機能を提供し、視覚的なダッシュボードも備えています。複雑なジョブ管理が必要な場合に適しています。
  • node-resqueは、Redisを使用したジョブキューライブラリで、バックグラウンドジョブの処理を簡素化します。シンプルなAPIと、複数のバックエンドに対応した柔軟性を持ち、さまざまなアプリケーションに適応可能です。

これらのライブラリの比較については、以下のリンクを参照してください: agenda vs bee-queue vs bull vs bullmq vs kue vs node-resqueの比較。

agendaと類似したnpmパッケージ

agenda は、Node.js アプリケーションのためのジョブスケジューリングライブラリです。MongoDB をバックエンドとして使用し、簡単にジョブをスケジュール、管理、実行することができます。Agenda は、定期的なタスクや遅延実行が必要なタスクを扱うのに非常に便利です。しかし、Agenda には他にも多くの選択肢があります。以下はそのいくつかの代替ライブラリです。

  • bull は、Redis をバックエンドに使用した高性能なジョブおよびメッセージキューライブラリです。Bull は、バックグラウンドでのタスク処理、再試行、優先順位付け、遅延キューなど、非常に多機能です。特に、スケーラブルなアプリケーションや高負荷の環境での使用に適しています。Bull は、ジョブの状態管理や進捗状況のトラッキングが容易で、強力なエコシステムを持っています。
  • node-schedule は、Node.js 環境でのスケジュールされたタスクを管理するためのシンプルなライブラリです。Cron スタイルのスケジューリングをサポートしており、特定の時間や間隔でタスクを実行することができます。node-schedule は、軽量で使いやすく、簡単なスケジューリングが必要な場合に最適です。

これらのライブラリの比較については、以下のリンクを参照してください: Comparing agenda vs bull vs node-schedule。

bee-queueと類似したnpmパッケージ

bee-queueは、Node.jsアプリケーション向けのシンプルで効率的なキューライブラリです。特に、軽量で高性能なバックグラウンドジョブ処理を実現するために設計されています。bee-queueは、Redisを使用してジョブを管理し、簡単なAPIを提供することで、開発者がバックグラウンドタスクを簡単に実装できるようにします。以下は、bee-queueの代替となるいくつかのライブラリです。

  • agendaは、MongoDBを使用したジョブスケジューリングライブラリです。agendaは、定期的なタスクや遅延タスクのスケジューリングを簡単に行うことができ、柔軟なスケジューリング機能を提供します。MongoDBを既に使用しているプロジェクトに統合するのに適しており、スケジュールされたジョブの管理が容易です。
  • bullは、強力で高機能なRedisベースのキューライブラリです。bullは、ジョブの優先順位、リトライ機能、進捗状況の追跡など、豊富な機能を提供します。大規模なアプリケーションや複雑なジョブ処理が必要な場合に最適です。
  • kueは、Node.js用のもう一つのRedisベースのキューライブラリです。kueは、ジョブの管理や監視のためのWebインターフェースを提供し、ジョブの状態を視覚的に確認することができます。ただし、kueは現在メンテナンスが行われていないため、新しいプロジェクトには推奨されません。
  • p-queueは、Promiseベースのキューライブラリで、非同期処理の制御を提供します。p-queueは、同時実行数を制限し、タスクの実行順序を管理するのに役立ちます。特に、APIリクエストや非同期処理の制御が必要な場合に便利です。

これらのライブラリの比較については、こちらをご覧ください: agenda vs bee-queue vs bull vs kue vs p-queue。

kueと類似したnpmパッケージ

kueは、Node.jsアプリケーション向けの優れたジョブおよびキュー管理ライブラリです。バックグラウンドタスクの処理や、非同期ジョブの管理を簡単に行うことができ、特に大規模なアプリケーションでの使用に適しています。kueは、Redisを使用してジョブの状態を管理し、失敗したジョブの再試行や進行状況の追跡をサポートしています。しかし、kueの代替となるライブラリもいくつか存在します。以下にいくつかの選択肢を紹介します。

  • agendaは、MongoDBをバックエンドに使用するジョブスケジューラで、シンプルで柔軟なAPIを提供します。特に、定期的なタスクやスケジュールされたジョブの管理に適しており、MongoDBを使用しているプロジェクトに統合しやすいです。agendaは、ジョブのスケジューリングやキャンセル、再試行などの機能を提供します。
  • bee-queueは、シンプルで高性能なRedisベースのジョブキューライブラリです。特に、低レイテンシーと高スループットを重視して設計されており、軽量なアプローチを提供します。bee-queueは、簡単に使用できるAPIを持ち、ジョブの優先順位や再試行の設定もサポートしています。
  • breeは、Node.jsのジョブスケジューラで、シンプルなAPIを提供し、バックグラウンドでのタスク処理を容易にします。breeは、ジョブのスケジューリングやキャンセル、再試行をサポートし、シンプルな構成で使いやすいのが特徴です。
  • bullは、Redisを使用した非常に強力で柔軟なジョブキューライブラリです。bullは、優先順位、遅延ジョブ、リトライ機能など、豊富な機能を提供し、大規模なアプリケーションでもスケーラブルなジョブ管理が可能です。特に、複雑なジョブの依存関係を管理するのに適しています。
  • node-resqueは、Redisを使用したジョブキューライブラリで、シンプルなAPIを提供します。node-resqueは、バックグラウンドタスクの処理を容易にし、複数のワーカーを使用してスケーラブルなアプリケーションを構築するのに役立ちます。

これらのライブラリの比較については、こちらをご覧ください: Comparing agenda vs bee-queue vs bree vs bull vs kue vs node-resque。

bullmq のREADME



The fastest, most reliable, Redis-based distributed queue for Node.
Carefully written for rock solid stability and atomicity.

Read the documentation

Follow @manast for *important* Bull/BullMQ/BullMQ-Pro news and updates!

🛠 Tutorials

You can find tutorials and news in this blog: https://blog.taskforce.sh/

News 🚀

🌐 Language agnostic BullMQ

Do you need to work with BullMQ on platforms other than Node.js? If so, check out the BullMQ Proxy

Official FrontEnd

Taskforce.sh, Inc

Supercharge your queues with a professional front end:

  • Get a complete overview of all your queues.
  • Inspect jobs, search, retry, or promote delayed jobs.
  • Metrics and statistics.
  • and many more features.

Sign up at Taskforce.sh

🚀 Sponsors 🚀

Dragonfly Dragonfly is a new Redis™ drop-in replacement that is fully compatible with BullMQ and brings some important advantages over Redis™ such as massive better performance by utilizing all CPU cores available and faster and more memory efficient data structures. Read more here on how to use it with BullMQ.

Used by

Some notable organizations using BullMQ:

Microsoft Vendure Datawrapper Nest Langfuse
Curri Novu NoCodeDB Infisical

The gist

Install:

$ yarn add bullmq

Add jobs to the queue:

import { Queue } from 'bullmq';

const queue = new Queue('Paint');

queue.add('cars', { color: 'blue' });

Process the jobs in your workers:

import { Worker } from 'bullmq';

const worker = new Worker('Paint', async job => {
  if (job.name === 'cars') {
    await paintCar(job.data.color);
  }
});

Listen to jobs for completion:

import { QueueEvents } from 'bullmq';

const queueEvents = new QueueEvents('Paint');

queueEvents.on('completed', ({ jobId }) => {
  console.log('done painting');
});

queueEvents.on(
  'failed',
  ({ jobId, failedReason }: { jobId: string; failedReason: string }) => {
    console.error('error painting', failedReason);
  },
);

Adds jobs with parent-child relationship:

import { FlowProducer } from 'bullmq';

const flow = new FlowProducer();

const originalTree = await flow.add({
  name: 'root-job',
  queueName: 'topQueueName',
  data: {},
  children: [
    {
      name: 'child-job',
      data: { idx: 0, foo: 'bar' },
      queueName: 'childrenQueueName',
      children: [
        {
          name: 'grandchild-job',
          data: { idx: 1, foo: 'bah' },
          queueName: 'grandChildrenQueueName'
        },
        {
          name: 'grandchild-job',
          data: { idx: 2, foo: 'baz' },
          queueName: 'grandChildrenQueueName'
        },
      ],
    },
    {
      name: 'child-job',
      data: { idx: 3, foo: 'foo' },
      queueName: 'childrenQueueName'
    },
  ],
});

This is just scratching the surface, check all the features and more in the official documentation

Feature Comparison

Since there are a few job queue solutions, here is a table comparing them:

FeatureBullMQ-ProBullMQBullKueBeeAgenda
Backendredisredisredisredisredismongo
Observables✓
Group Rate Limit✓
Group Support✓
Batches Support✓
Parent/Child Dependencies✓✓
Deduplication (Debouncing)✓✓✓
Deduplication (Throttling)✓✓✓
Priorities✓✓✓✓✓
Concurrency✓✓✓✓✓✓
Delayed jobs✓✓✓✓✓
Global events✓✓✓✓
Rate Limiter✓✓✓
Pause/Resume✓✓✓✓
Sandboxed worker✓✓✓
Repeatable jobs✓✓✓✓
Atomic ops✓✓✓✓
Persistence✓✓✓✓✓✓
UI✓✓✓✓✓
Optimized forJobs / MessagesJobs / MessagesJobs / MessagesJobsMessagesJobs

Contributing

Fork the repo, make some changes, submit a pull-request! Here is the contributing doc that has more details.

Thanks

Thanks for all the contributors that made this library possible, also a special mention to Leon van Kammen that kindly donated his npm bullmq repo.

npm-compare.com is an independent website designed to help developers choose the most suitable npm packages. We are not affiliated with npm, Inc, the official website for the npm registry. Note that npm is a registered trademark of npm, Inc. Please share your feedback via our GitHub repository. For more details, please refer to our Terms & Privacy.