否
是
聊天页发送语音
FileTransferSendPipeline.sendFile(...)
Voice Model 是否开启
raw 原始字节流直传
AudioProcessor.buildVoiceTransferData(audioPath)
readWaveFile(): 读取 PCM WAV
resampleLinear(): 重采样到 24kHz
extractMelSpectrogram(): 提取 100-bin log-Mel
按 100 帧一块切 patch
组装输入张量 [patchCount,1,100,100]
voice encoder 前向推理
得到 encoded floatData + shape
写 TCP 头: fileName!fileSize!senderId!VOICE!model
写 body: shapeLength + shape + totalOriginalLength + frameInfos + floatData
发送完成后发 UDP 文本通知 IPMSG_SENDMSG
接收端 FileTransferReceivePipeline
读 TCP 头并判断 mode=model
读 body: shape + totalOriginalLength + frameInfos + floatData
voice decoder 前向推理
得到解码后的频谱 patch
AudioProcessor.reconstructSpectrogram(...)
重建完整频谱 [time, mel]
保存 .wav.specbin 调试文件
toVocosInput(): 转成 [1, melBins, time]
audio decoder/vocos 前向推理
得到 24kHz 浮点波形
writeFloatWav(..., 24000)
落盘成 .wav
更新聊天消息路径/状态
刷新聊天页与最近会话
发送语音流程图
oyezitan2026-03-31 14:33
相关推荐
Ashley_Amanda2 天前
UiPath005 流程图✎ ﹏梦醒͜ღ҉繁华落℘7 天前
Visio 绘制流程图秋912 天前
AI快速生成可编辑的流程图的方法宁静致远202112 天前
Mermaid VSCode插件制作流程图保存方法min18112345614 天前
小型网站开发简易流程步骤 在线画图工具快速生成开发流程图方法DYuW5gBmH15 天前
Kafka 成功消费消息的完整流程图数说星榆18117 天前
无人员伤亡车辆事故处理流程图 快速结案流程dajun18112345617 天前
信息系统运维管理全流程详解 在线画图工具绘制运维流程图表技巧数说星榆18117 天前
罕见病例报告流程图学术论文用fish-man18 天前
测试流程图显示