sindresorhusp-queue JavaScript 异步并发控制器

sindresorhus/p-queue: JavaScript 异步并发控制器

p-queue 在 GitHub 上已经拿到 4,200 Star 了。 这是一个专门控制 JavaScript 异步操作并发数量的工具,适用于 Node.js 和浏览器环境。

1、核心功能

批量处理异步任务时,p-queue 可以限制同时运行的任务数量,避免资源耗尽。比如批量请求接口、处理大量文件读写时,控制并发数可以防止触发服务限流,也能避免系统负载过高。

2、主要特性

支持优先级设置,高优先级任务可以先执行。支持暂停和恢复队列,运行过程中可以动态调整并发数。支持任务超时设置,超过指定时间未完成的任务自动终止。支持事件监听,可以获取任务完成、失败、队列空闲等状态通知。

3、基础使用示例

安装:

bash 复制代码
npm install p-queue

基础用法:

javascript 复制代码
import PQueue from 'p-queue';
// 最多同时运行2个异步任务
const queue = new PQueue({ concurrency: 2 });
// 添加任务到队列
queue.add(() => fetch('https://example.com/api/1'));
queue.add(() => fetch('https://example.com/api/2'));
queue.add(() => fetch('https://example.com/api/3'));
// 前两个任务同时执行,第三个等前两个任意一个完成后再启动

4、适用场景

  • 批量爬取网页数据,控制请求频率避免被服务方限制
  • 批量上传或下载文件,限制网络带宽占用
  • 处理大量异步计算任务,控制 CPU 负载在合理范围
  • 调用第三方 API 时,符合服务商的限流规则要求 开源地址:github.com/sindresorhu...
相关推荐
CSDN官方博客7 小时前
GitHub Copilot 新手极速上手指南
github·copilot
用户57844292286212 小时前
GraphRAG 与 LightRAG
github
峰向AI12 小时前
别再花几万块搭 Agent 了,[微软开源] 3500 行框架让 AI 自己练级
github
解道Jdon19 小时前
JDK 27发布:紧凑对象头、G1默认、量子安全TLS
ide·windows·git·svn·eclipse·github·visual studio
m4Rk_19 小时前
【论文阅读】Agent 记忆机制(72):EMA——在写入前决定什么值得记住
论文阅读·人工智能·学习·开源·github
OpenTiny社区19 小时前
从开发到运行:OpenTiny NEXT 如何构建 Agent 时代的 Web 应用?
前端·github·ai编程
政安晨20 小时前
政安晨【超级AI智能体~技术简报】- Skills 元方法论霸榜 + Agent Harness 爆发 + 反直觉叙事的胜利
github·开源项目·ai agent·技术简报·政安晨
QUOR20 小时前
ZorvAI APK 插件框架 · 技术架构与功能介绍
github·apk·编程语言
孙琦Ray20 小时前
Homebrew/BrewUI:Homebrew 官方出的 macOS 图形客户端,把 brew 的装包、更新包变成点选
人工智能·开源·github
HelloGitHub21 小时前
从一份 README 到 3 万星,RustFS 这一年都干了什么?
开源·github