sindresorhusp-queue JavaScript 异步并发控制器

sindresorhus/p-queue: JavaScript 异步并发控制器

p-queue 在 GitHub 上已经拿到 4,200 Star 了。 这是一个专门控制 JavaScript 异步操作并发数量的工具,适用于 Node.js 和浏览器环境。

1、核心功能

批量处理异步任务时,p-queue 可以限制同时运行的任务数量,避免资源耗尽。比如批量请求接口、处理大量文件读写时,控制并发数可以防止触发服务限流,也能避免系统负载过高。

2、主要特性

支持优先级设置,高优先级任务可以先执行。支持暂停和恢复队列,运行过程中可以动态调整并发数。支持任务超时设置,超过指定时间未完成的任务自动终止。支持事件监听,可以获取任务完成、失败、队列空闲等状态通知。

3、基础使用示例

安装:

bash 复制代码
npm install p-queue

基础用法:

javascript 复制代码
import PQueue from 'p-queue';
// 最多同时运行2个异步任务
const queue = new PQueue({ concurrency: 2 });
// 添加任务到队列
queue.add(() => fetch('https://example.com/api/1'));
queue.add(() => fetch('https://example.com/api/2'));
queue.add(() => fetch('https://example.com/api/3'));
// 前两个任务同时执行,第三个等前两个任意一个完成后再启动

4、适用场景

  • 批量爬取网页数据,控制请求频率避免被服务方限制
  • 批量上传或下载文件,限制网络带宽占用
  • 处理大量异步计算任务,控制 CPU 负载在合理范围
  • 调用第三方 API 时,符合服务商的限流规则要求 开源地址:github.com/sindresorhu...
相关推荐
七牛开发者1 小时前
RAG 工程里的上下文剪枝:如何减少 68% 的上下文
前端·css·github
Alex6630286 小时前
我重写了 Hermes Agent,专门修掉了它的 4 个硬伤
github
考虑考虑6 小时前
git中的tag
git·gitlab·github
小墨同学boy7 小时前
WorkBuddy零基础教程进阶篇
人工智能·github·aigc
BerrySen1788 小时前
GitHub开源项目破圈方法论:从技术自嗨到生态共赢
开源·github
JavaGuide1 天前
一个神级 PR Review Agent 诞生了:读 diff、写总结、找风险全自动!
github·ai编程
逛逛GitHub1 天前
1.3 万人点赞的 GitHub 项目,让 AI Agent 操作 Office 文件。
github
OpenTiny社区1 天前
Skill 设计:封装、评测、运营,一次讲透
前端·github
本地化文档1 天前
xlwings-docs-l10n
python·github·excel·gitcode·sphinx