WebRTC原生PLC VS SILK之PLC

一、WebRTC的PLC调度策略

GetAudioInternal

只有WebRTC使用opus编解码的时候,才会调用opus的decode,进而调用silk的plc

否则走的都是WebRTC原生的DoExpand函数,使用的是Expand::Process算法。

二、SILK编码的PLC实现原理

参考如下链接介绍:https://blog.csdn.net/CrystalShaw/article/details/159652142?spm=1001.2014.3001.5502https://blog.csdn.net/CrystalShaw/article/details/159652142?spm=1001.2014.3001.5502

结合核心函数silk_PLC实现:

当网络传输发生数据包丢失,解码器无法获得当前帧的编码参数(如 LPC 系数、基音周期、增益等)。为不让音频中断或产生刺耳的噪音,该函数利用前一帧的信息来猜测并合成当前丢失帧的信号,同时随着丢包时间的延长逐渐衰减信号能量,使听感自然过渡到静音。

  1. 核心设计思想
    参数延续 :使用上一帧的 LPC 系数、基音周期(Pitch Lag)和增益。
    能量衰减 :随连续丢包数量(lossCnt)增加,逐渐降低信号增益,避免突然静音或持续大声重复。
    去周期性 :在重复基音信号时加入随机噪声,防止声音变成单调的"机器人音"或蜂鸣声。
    基音漂移 :缓慢增加基音周期,模拟人声自然变化,避免频率锁定。
    滤波器稳定化:对上一帧LPC系数进行带宽扩展BWE,防止合成滤波器不稳定导致信号发散。

三、WebRTC原生PLC实现原理

参见如下链接:

https://blog.csdn.net/CrystalShaw/article/details/150986067?spm=1001.2014.3001.5501https://blog.csdn.net/CrystalShaw/article/details/150986067?spm=1001.2014.3001.5501

四、对比小结

无论是opus的plc还是WebRTC原生的plc,其实都是通过LTP、LPC进行预测、衰减、平滑过渡。

opus的LTP、LPC等参数是编码器带过来的,不用进行重新计算,而WebRTC的plc,在感知到丢包后,会调用历史数据,重新计算LTP和LPC等参数信息,实际测试效果上没太大质的不同。

相关推荐
程序员老陆3 天前
WHIP 与 WHEP:WebRTC 直播的标准化入口与出口
ffmpeg·音视频·webrtc·whip·whep
平行云11 天前
国产GPU云渲染适配实战:驱动兼容、编码调优与多路并发
unity·ue5·webrtc·webgl·实时云渲染·云桌面·像素流送
隐擎fox12 天前
网络传输安全剖析:WebRTC 本地真实 IP 泄漏机制(STUN/TURN)与 Python 防护检测实战
网络·网络协议·tcp/ip·安全·webrtc
福大大架构师每日一题14 天前
mediamtx v1.21.0 发布:Media-over-QUIC、RTSP、HLS、WebRTC 与安全能力全面升级
安全·webrtc
脏脏a15 天前
Neko 自托管实战:WebRTC 远程浏览器、多用户权限与公网访问
webrtc
cuijiecheng201816 天前
从 6.49 秒到约 1.9 秒:RK3588上的WebRTC 实时流启动速度优化记录
webrtc
SendTomo17 天前
SendTomo 与 send.wang 全景对比评测与实战指南
网络·网络协议·tcp/ip·webrtc·p2p
java_logo17 天前
Docker 部署 SRS:轻松搭建实时音视频流媒体平台
docker·容器·webrtc·实时音视频·rtmp·http-flv·轩辕镜像
wjcroom18 天前
一个可以在线多人玩的五子棋开发与布署方法-WebRTC和WebSocket的测试方法
websocket·网络协议·webrtc
cuijiecheng201821 天前
RK3588 WebRTC 实时流卡顿优化:从视频桥接到 H.264 PTS 回退
音视频·webrtc·h.264