sindresorhus/p-queue: JavaScript 异步并发控制器
p-queue 在 GitHub 上已经拿到 4,200 Star 了。 这是一个专门控制 JavaScript 异步操作并发数量的工具,适用于 Node.js 和浏览器环境。
1、核心功能
批量处理异步任务时,p-queue 可以限制同时运行的任务数量,避免资源耗尽。比如批量请求接口、处理大量文件读写时,控制并发数可以防止触发服务限流,也能避免系统负载过高。 
2、主要特性
支持优先级设置,高优先级任务可以先执行。支持暂停和恢复队列,运行过程中可以动态调整并发数。支持任务超时设置,超过指定时间未完成的任务自动终止。支持事件监听,可以获取任务完成、失败、队列空闲等状态通知。
3、基础使用示例
安装:
bash
npm install p-queue
基础用法:
javascript
import PQueue from 'p-queue';
// 最多同时运行2个异步任务
const queue = new PQueue({ concurrency: 2 });
// 添加任务到队列
queue.add(() => fetch('https://example.com/api/1'));
queue.add(() => fetch('https://example.com/api/2'));
queue.add(() => fetch('https://example.com/api/3'));
// 前两个任务同时执行,第三个等前两个任意一个完成后再启动

4、适用场景
- 批量爬取网页数据,控制请求频率避免被服务方限制
- 批量上传或下载文件,限制网络带宽占用
- 处理大量异步计算任务,控制 CPU 负载在合理范围
- 调用第三方 API 时,符合服务商的限流规则要求 开源地址:github.com/sindresorhu...