jssip修改SDP优先VP8

在使用Freeswitch会议融屏的时候,画面有时候会偏色,感觉编解码少了通道,整体会偏紫;怀疑是mp4的编解码可能有问题,后续改成优先VP8,感觉在使用的时候会减少类似情况;

找到暴露的位置
javascript 复制代码
UA.on('newRTCSession', (res) => {
    let { session, originator } = res;
    session.on('sdp', (event) => {
        // sdp一定要判断type是'offer'的时候去修改;
        if (event.type === 'offer') {
            let sdp = event.sdp;
            // 修改SDP优先匹配VP8
            sdp =  SDPPrioritizeCodec(sdp, 'VP8');
            event.sdp = sdp;
        };
    });
})
封装修改SDP方法
javascript 复制代码
/* 调用 SDPPrioritizeCodec(sdp, 'VP8'); */
export function SDPPrioritizeCodec(sdp, preferredCodec) {
    const codecRegex = /a=rtpmap:(\d+) (\w+)/g;
    let codecPayloads = {};
    let sdpLines = sdp.split('\r\n');
    let mLineIndex = -1;

    // 遍历SDP的每一行,找到codec的payload types
    sdpLines.forEach((line, index) => {
        if (line.startsWith('m=video')) {
            mLineIndex = index;
        }
        let match = codecRegex.exec(line);
        while (match) {
            codecPayloads[match[2]] = match[1];
            match = codecRegex.exec(line);
        }
    });

    // 如果找到了m=video行
    if (mLineIndex !== -1) {
        let mLineParts = sdpLines[mLineIndex].split(' ');
        let payloadList = mLineParts.slice(3); // 去掉m=video和端口号部分,只保留payload types
        
        let preferredPayload = codecPayloads[preferredCodec];
        let updatedPayloadList = payloadList.filter(p => p !== preferredPayload); // 删除优先编解码器,准备重新排序
        
        if (preferredPayload) {
            // 将优先的编解码器Payload放在最前面
            updatedPayloadList.unshift(preferredPayload);
            // 重新构建m=video行
            mLineParts = mLineParts.slice(0, 3).concat(updatedPayloadList);
            sdpLines[mLineIndex] = mLineParts.join(' ');
        }
    }

    return sdpLines.join('\r\n');
}
相关推荐
广州硅基技术官方5 小时前
AIGK外贸工厂社媒引流实战教程:海外自媒体短视频AI矩阵获客玩法解析
人工智能·音视频·媒体
奈斯先生Vector9 小时前
AIGC 视频生成换个拍法:用 Kling Video 把一张人物图变成可剪辑的短故事
开发语言·人工智能·windows·python·aigc·音视频
AI的探索之旅10 小时前
97 个 OpenCV 实例(二十一):音频进阶,音视频同抽与麦克风采集
人工智能·opencv·音视频
独码侠11 小时前
FunASR语音识别生产部署实战:511MB音频47秒转写,离线落地 8 步、7 坑一次说清
人工智能·音视频·语音识别·funasr·说话人分离·会议纪要·内网离线部署
xiaolu123881 天前
网课视频怎么录课?3种录制方法分享,附参数配置介绍
音视频
ai产品老杨1 天前
H264 H265视频分析问题清单:环境、参数、验证和排错
音视频
论文复现现场1 天前
MiniMaxH3 生成视频速度慢、电脑带不动怎么办?用 RTX 5090 云端镜像快速运行
云计算·电脑·音视频·gpu算力
阿童木写作1 天前
跨境电商翻译工具推荐:批量图片翻译+视频字幕实时翻译
人工智能·python·音视频
小柯南敲键盘1 天前
跨境电商翻译工具,AI批量图片及视频字幕翻译
大数据·人工智能·python·音视频
2601_962069531 天前
2026年医学数字人做科普视频的技术路线:从开源工具链到半自动化的工程复盘
开源·音视频