线上接收附件回调超时排查复现

问题概述

线上环境收到多起关于文件上传及合同归档功能响应缓慢甚至超时的反馈。具体表现为:在执行包含多个大文件(约40MB/个)的上传操作时,接口响应时间极长,查看php-fpm日志和慢查询日志可以看到executing too slow (34.738390 sec), logging
WARNING:[pool www] child 4545... execution timed out (104.745266 sec)。

堆栈追踪

堆栈信息清晰地指向了文件处理与OSS上传阶段。
[0x00007f8661e15880] curl_exec() /.../vendor/aliyuncs/oss-sdk-php/src/OSS/Http/RequestCore.php:844
[0x00007f8661e15160] putFile() /.../vendor/topthink/framework/src/think/filesystem/Driver.php:104
[0x00007f8661e14ec0] createData() /.../File.php:249

深度排查与根因定位

在排除内存溢出因素后,我们对上传耗时进行了分段测试,结果如下:

OSS上传耗时:约20秒/个文件(主要瓶颈)

带宽测算

单个文件大小约40MB,上传耗时20秒。

计算公式:

Speed=40 MB20 s=2 MB/sSpeed=20 s40 MB​=2 MB/s

Bandwidth=2 MB/s×8=16 MbpsBandwidth=2 MB/s×8=16 Mbps

结论

服务器的公网带宽上限约为15-20Mbps。当单次请求并发上传5个文件(总大小约200MB)时,带宽被瞬间占满,导致物理传输极限被锁定在2MB/s。

总耗时计算:

Total_Time=5×20s=100sTotal_Time=5×20s=100s

虽然104秒超过PHP设置的100秒阈值,线上设置的阈值就是100。

方案

方案一:启用OSS内网上传(强烈推荐)

若应用服务器与OSS Bucket位于同一地域(如均为华东1-杭州),应强制使用内网Endpoint进行通信。

  • 优势:内网传输不占用公网带宽,速度可达千兆级,且免流量费。
  • 预期效果:单文件上传耗时将从20秒降低至1秒以内。
  • 配置修改 :修改config/filesystem.php中的endpoint配置。

方案二:调整超时配置(兜底方案)

若必须维持现有的并发上传逻辑,需调整服务端超时配置以适应低带宽环境。

  • PHP-FPM :request_terminate_timeout = 300
  • Nginx :fastcgi_read_timeout = 300
  • 注意:此方案仅能防止报错,无法提升用户体验,且会长时间占用服务器进程资源。

方案三:异步上传队列

若必须维持现有的并发上传逻辑,需要修改上传为异步队列处理,不限制时间。

相关推荐
读书札记202218 小时前
Qt UTF-8和UTF-8(BOM)
开发语言·qt
ShineWinsu19 小时前
对于Qt:QProgressBar常见属性的解析
开发语言·c++·qt·进度条·gui·定时器·qprogressbar
fanruitian19 小时前
python 机器学习 交叉验证train_test_split 网格搜索GridSearchCV
开发语言·python·机器学习
AlanAshley19 小时前
无 SIM 卡也能打 110?手机紧急呼叫能力的软硬件技术探究
开发语言·智能手机·php
modelmd19 小时前
Go 切片、映射常见使用场景
开发语言·后端·golang
dialect_1 天前
KMP算法
开发语言·c++·算法
总要学点什么1 天前
第89篇:三维特效-螺旋圆效果——让螺旋臂卷起一圈圈外扩的涟漪
开发语言·javascript·ecmascript·webgl·cesium·空间分析·1024程序员节
开开心心_Every1 天前
快速隐藏程序工具自定义快捷键一键切换
java·开发语言·前端·spring·智能手机·word·intellij-idea
chenbingjie_c1 天前
C++ 多态完全指南:从虚函数重写到虚函数表原理
开发语言·c++
吴卫斌1 天前
定投ETF实战指南(四):行业/主题ETF——定投的“进攻端“
开发语言·python·股票·量化