OkHttp 的 Dispatcher 调度机制

总体思路

Dispatcher 维护三组队列并用一个 ExecutorService 执行异步任务:

  • readyAsyncCalls:已排队、等待调度的异步请求

  • runningAsyncCalls:正在执行的异步请求

  • runningSyncCalls:正在执行的同步请求

    还暴露 maxRequests(默认 64 )与 maxRequestsPerHost(默认 5 )两道闸门控制并发。异步入队后,通过 promoteAndExecute() 把"达标"的请求从 ready 提升到 running 并提交线程池。

关键数据结构与默认线程池

  • 默认线程池:ThreadPoolExecutor(0, Int.MAX_VALUE, 60s, SynchronousQueue)(即 cached-pool 语义)。你也可传入自定义的 ExecutorService。

  • 两个并发阈值:

    • maxRequests:全局并发上限(默认 64)

    • maxRequestsPerHost:单 host 并发上限(默认 5,WebSocket 不计入

      修改任一值都会触发一次 promoteAndExecute() 以尝试推进排队任务。

调度算法(promoteAndExecute())

简化后的流程(注意:执行阶段不持有锁,避免回调用户代码时死锁):

  1. 加锁遍历 readyAsyncCalls:

    • 若 runningAsyncCalls.size >= maxRequests → 停;
    • 若该调用的 callsPerHost >= maxRequestsPerHost → 跳过;
    • 否则把该调用从 ready 移到 running,并 callsPerHost++,放入"可执行列表"。
  2. 释放锁,逐个 executeOn(executorService) 真正提交到线程池。

  3. 返回当前是否还有运行中的调用。

    对应代码逻辑就在 promoteAndExecute() 与 enqueue()/finished() 的配合里。

单 Host 计数是如何做的?

enqueue() 时,会尝试在现有的 runningready寻找同 host 的调用 ,如果找到了,就复用对方的 AtomicInteger 来统计该 host 的并发计数;这样同一 host 的排队与执行共享同一把计数器,能更精准地卡 maxRequestsPerHost。

生命周期与空闲回调

  • 同步调用:Call.execute() 开始时登记到 runningSyncCalls,结束时 finished() 移除并触发一次调度。

  • 异步调用:AsyncCall 结束时 callsPerHost--,从 runningAsyncCalls 移除,再触发调度。

  • 总运行数归零时,若设置了 idleCallback 会被调用(注意:异步是在回调返回后才视为 idle;同步是在 execute() 返回时)。

与线程池的关系(为什么不在池里排队)

OkHttp 的排队在 Dispatcher 内存里做,不是在线程池队列里做:

  • 线程池用 SynchronousQueue ------ 不排队,能执行就直接交给线程,否则新建线程(直到 Dispatcher 的并发阈值到顶)。

  • 真正的"上限与公平"由 maxRequests/PerHost 控制,而不是线程池大小。

HTTP/2 与 WebSocket 的细节

  • maxRequestsPerHost 是按 URL host 名计数(不同域名可能共享 IP,因此该限制不保证按 IP 收敛)。

  • WebSocket 不占用单 host 配额(避免长连接把配额吃满)。

常见坑 & 建议

  • readyAsyncCalls 是内存队列默认无显式上限;若你持续入队且后端挂起,可能看到内存增长(需要你从业务侧限流或调低 maxRequests)。

  • 调参优先级:先评估 服务器承载端上资源 → 再合理设置 maxRequests/maxRequestsPerHost;必要时自定义 ExecutorService 或在业务层加 Semaphore/令牌桶。

实用示例:自定义并发与空闲回调

ini 复制代码
val dispatcher = Dispatcher().apply {
  maxRequests = 32              // 全局并发
  maxRequestsPerHost = 8        // 单 host 并发
  idleCallback = Runnable { println("network idle") }
}

val client = OkHttpClient.Builder()
  .dispatcher(dispatcher)
  .build()

(如果你自己传 executorService,需确保它能跑得动你设置的最大并发。)

相关推荐
踏浪无痕9 小时前
从单体PHP到微服务:一个五年老项目的血泪重构史
后端·面试·架构
阿伟*rui9 小时前
互联网大厂Java面试:音视频场景技术攻防与系统设计深度解析
java·redis·websocket·面试·音视频·高并发·后端架构
Java天梯之路9 小时前
Spring AOP:面向切面编程的优雅解耦之道
java·spring·面试
北慕阳9 小时前
(1)八股文 算法
面试·职场和发展
测试秃头怪19 小时前
2026最新软件测试面试八股文(含答案+文档)
自动化测试·软件测试·python·功能测试·测试工具·面试·职场和发展
大吱佬1 天前
面试记录自用
面试·职场和发展
前端布鲁伊1 天前
聊聊前端容易翻车的“环境管理”
前端·面试
用户12039112947261 天前
彻底搞定大模型流式输出:从二进制碎块到“嘚嘚嘚”打字机效果,让底层逻辑飞起来
前端·javascript·面试
kingmax542120081 天前
高中数学试讲稿:《对数与指数之间的相互转化》
面试·教师资格
over6971 天前
深入解析:基于 Vue 3 与 DeepSeek API 构建流式大模型聊天应用的完整实现
前端·javascript·面试