sindresorhusp-queue JavaScript 异步并发控制器

sindresorhus/p-queue: JavaScript 异步并发控制器

p-queue 在 GitHub 上已经拿到 4,200 Star 了。 这是一个专门控制 JavaScript 异步操作并发数量的工具,适用于 Node.js 和浏览器环境。

1、核心功能

批量处理异步任务时,p-queue 可以限制同时运行的任务数量,避免资源耗尽。比如批量请求接口、处理大量文件读写时,控制并发数可以防止触发服务限流,也能避免系统负载过高。

2、主要特性

支持优先级设置,高优先级任务可以先执行。支持暂停和恢复队列,运行过程中可以动态调整并发数。支持任务超时设置,超过指定时间未完成的任务自动终止。支持事件监听,可以获取任务完成、失败、队列空闲等状态通知。

3、基础使用示例

安装:

bash 复制代码
npm install p-queue

基础用法:

javascript 复制代码
import PQueue from 'p-queue';
// 最多同时运行2个异步任务
const queue = new PQueue({ concurrency: 2 });
// 添加任务到队列
queue.add(() => fetch('https://example.com/api/1'));
queue.add(() => fetch('https://example.com/api/2'));
queue.add(() => fetch('https://example.com/api/3'));
// 前两个任务同时执行,第三个等前两个任意一个完成后再启动

4、适用场景

  • 批量爬取网页数据,控制请求频率避免被服务方限制
  • 批量上传或下载文件,限制网络带宽占用
  • 处理大量异步计算任务,控制 CPU 负载在合理范围
  • 调用第三方 API 时,符合服务商的限流规则要求 开源地址:github.com/sindresorhu...
相关推荐
笨鸟先飞,勤能补拙35 分钟前
密码学深度指南 — SecOps 工程师实战手册
人工智能·vscode·python·安全·github·密码学·visual studio
TunerT_TQ1 小时前
Valhalla 静态工程审阅 #004|MoonshotAI MoonEP 源码证据驱动评测【大厂开源基础设施特辑】
架构·github
0xR3lativ1ty15 小时前
每日GitHub trending精选
github
带娃的IT创业者15 小时前
GitHub 热门项目解析:当 AI 编码助手遭遇“上下文爆炸”
人工智能·github·代码优化·ai编程助手·上下文窗口·上下文压缩
白鲸开源18 小时前
Apache SeaTunnel 提交一个任务都经过了什么?
大数据·开源·github
dong_junshuai18 小时前
每天一个开源项目#60 TencentDB Agent Memory:1.4万星的团队记忆中枢
github·腾讯
dong_junshuai18 小时前
每天一个开源项目#61 3.9K Stars:Cloudflare 给 Agent 一台持久云电脑
程序员·github
橙序员小站18 小时前
我把公众号生产链做成了全本地的 AI 工作台 🛠️
程序员·github
笨鸟先飞,勤能补拙19 小时前
AI 安全的下一个 5 年:从 Agent 到 AGI 的攻防博弈
人工智能·python·安全·web安全·网络安全·github·agi
Bryce学亮20 小时前
FileLine,基于 Qt 6 + QML 构建的跨平台文件传输与即时通讯工具
数据库·c++·人工智能·python·qt·github