WebRTC 多媒体 SDP 示例与解析

webRTC中的SDP的Bundlle可能包含一个或者多个媒体块(媒体描述, 源码对应类ContentInfo),从 m= 开始到下一个 m= 行(或 SDP 结束)之间的所有属性(包括 a=)都属于同一个媒体块(media section, 源码里面对应类MediaContentDescription),下面举例一个包含音频、视频和数据通道的完整 SDP 详细说明:

完整 SDP 示例

sdp 复制代码
v=0
o=- 621762799816690914 2 IN IP4 127.0.0.1
s=-
t=0 0
a=group:BUNDLE audio video data  # Bundle组定义
a=msid-semantic: WMS stream_label

### 音频媒体块 ###
m=audio 49170 UDP/TLS/RTP/SAVPF 111 103 104  # 媒体行
c=IN IP4 192.168.1.100
a=rtcp:49171 IN IP4 192.168.1.100
a=ice-ufrag:8hhy
a=ice-pwd:38dsu82jd9sll
a=fingerprint:sha-256 A1:B2:C3:...
a=setup:actpass
a=mid:audio  # 媒体标识符
a=sendrecv
a=rtpmap:111 opus/48000/2
a=fmtp:111 minptime=10;useinbandfec=1
a=rtpmap:103 ISAC/16000
a=rtpmap:104 ISAC/32000
a=ssrc:1234567890 cname:user@example.com

### 视频媒体块 ###
m=video 49172 UDP/TLS/RTP/SAVPF 96 97 98  # 媒体行
c=IN IP4 192.168.1.100
a=rtcp:49173 IN IP4 192.168.1.100
a=ice-ufrag:8hhy  # 与音频相同的ufrag/pwd
a=ice-pwd:38dsu82jd9sll
a=fingerprint:sha-256 A1:B2:C3:...  # 相同指纹
a=setup:actpass
a=mid:video  # 媒体标识符
a=sendrecv
a=rtpmap:96 VP8/90000
a=rtpmap:97 H264/90000
a=rtpmap:98 VP9/90000
a=ssrc:2345678901 cname:user@example.com

### 数据通道媒体块 ###
m=application 49174 UDP/DTLS/SCTP webrtc-datachannel  # 媒体行
c=IN IP4 192.168.1.100
a=ice-ufrag:8hhy  # 相同ufrag/pwd
a=ice-pwd:38dsu82jd9sll
a=fingerprint:sha-256 A1:B2:C3:...  # 相同指纹
a=setup:actpass
a=mid:data  # 媒体标识符
a=sctp-port:5000
a=max-message-size:262144

结构解析图解

Bundle Group 音频 audio 视频 video 数据通道 data 端口 49170 编解码: Opus/ISAC SSRC: 1234567890 端口 49172 编解码: VP8/H264/VP9 SSRC: 2345678901 端口 49174 SCTP端口: 5000

媒体块划分

1. 音频媒体块

2025-08-01 2025-08-01 2025-08-02 2025-08-02 2025-08-03 2025-08-03 2025-08-04 2025-08-04 2025-08-05 2025-08-05 2025-08-06 2025-08-06 UDP端口 ICE参数 DTLS指纹 Opus编解码 ISAC编解码 SSRC标识 传输层 媒体层 音频媒体块结构

2. 视频媒体块

2025-08-01 2025-08-01 2025-08-02 2025-08-02 2025-08-03 2025-08-03 2025-08-04 2025-08-04 2025-08-05 2025-08-05 2025-08-06 2025-08-06 2025-08-07 2025-08-07 UDP端口 ICE参数 DTLS指纹 VP8编解码 H264编解码 VP9编解码 SSRC标识 传输层 媒体层 视频媒体块结构

3. 数据通道媒体块

2025-08-01 2025-08-01 2025-08-01 2025-08-01 2025-08-02 2025-08-02 2025-08-02 2025-08-02 2025-08-03 2025-08-03 2025-08-03 2025-08-03 UDP端口 SCTP端口 最大消息 ICE参数 DTLS指纹 传输层 数据层 数据通道媒体块结构

Bundle 机制详解

1. 共享元素

30% 30% 20% 20% Bundle共享资源 ICE参数 DTLS指纹 传输通道 NAT映射

2. 实际端口分配

媒体类型 声明端口 实际使用端口 原因
音频 49170 49170 作为Bundle主通道
视频 49172 49170 复用音频端口
数据通道 49174 49170 复用音频端口

3. 源码中的Bundle处理

cpp 复制代码
// pc/jsep_transport_controller.cc
void JsepTransportController::MaybeCreateJsepTransport() {
  if (bundle_group_ && bundle_group_->HasContentName(content_name)) {
    // 复用主传输
    jsep_transport = GetJsepTransportForMid(bundle_group_->FirstContentName());
  } else {
    // 创建新传输
    jsep_transport = CreateJsepTransport();
  }
}

关键设计要点

1. 媒体块独立性

AudioDescription +codecs : vector<AudioCodec> +bandwidth : int +direction : MediaDirection VideoDescription +codecs : vector<VideoCodec> +rtp_extensions : vector<RtpExtension> DataDescription +sctp_port : int +max_message_size : int TransportDescription +ice_ufrag : string +ice_pwd : string +fingerprint : DtlsFingerprint

2. Bundle 实现机制

PeerConnection TransportController NetworkStack 创建Bundle组(audio,video,data) 为audio创建传输通道 将video/data映射到audio的通道 返回ICE候选(仅audio端口) 候选应用于所有Bundle媒体 PeerConnection TransportController NetworkStack

3. 协商过程

共享 复用 复用 Offer生成 Bundle组声明 音频描述 视频描述 数据描述 传输参数

实际应用场景

1. 多流会议系统

发布 音频 视频 屏幕共享 数据 User PeerConnection 48kHz Opus 1080p VP9 720p VP8 文件传输

2. 性能优化效果

指标 独立传输 Bundle模式 提升
连接建立时间 800ms 300ms 62.5%
端口使用数 3 1 66.7%
ICE开销 -
NAT穿透成功率 85% 95% +10%

调试技巧

1. 验证Bundle有效性

bash 复制代码
# 检查Bundle组内媒体是否兼容
grep -A 10 "m=" offer.sdp | grep -E "a=mid:|a=ice-ufrag:|a=fingerprint:"

# 预期输出应显示相同的ufrag和fingerprint
a=mid:audio
a=ice-ufrag:8hhy
a=fingerprint:sha-256 A1:B2:C3:...
--
a=mid:video
a=ice-ufrag:8hhy
a=fingerprint:sha-256 A1:B2:C3:...
--
a=mid:data
a=ice-ufrag:8hhy
a=fingerprint:sha-256 A1:B2:C3:...

2. 关键日志点

cpp 复制代码
// 检查Bundle组创建
RTC_LOG(LS_INFO) << "Created bundle group with mids: "
                 << bundle_group.ToString();

// 验证传输复用
RTC_LOG(LS_VERBOSE) << "Reusing transport for mid=" << mid
                    << " from primary mid=" << primary_mid;

3. 网络抓包分析

wireshark-filter 复制代码
# 显示Bundle端口的流量
udp.port == 49170 && (rtp || sctp || dtls)
相关推荐
赖small强2 小时前
【ZeroRang WebRTC】WebRTC 信令与传输的安全层解析:WSS、DTLS、SRTP
webrtc·sctp·wss·dtls·srtp
qq_310658512 天前
webrtc代码走读(十七)-音频QOS-NetEQ
服务器·网络·c++·音视频·webrtc
txp玩Linux2 天前
rk3568上解析webrtc音频降噪算法处理流程
算法·音视频·webrtc
RTC老炮3 天前
webrtc降噪-WienerFilter源码分析与算法原理
算法·webrtc
赖small强3 天前
【ZeroRange WebRTC】Amazon Kinesis Video Streams WebRTC initSignaling() 技术深度解析
websocket·webrtc·stun·kinesis·initsignaling
红米饭配南瓜汤3 天前
WebRTC 码率预估(1) - 接收端 TransportFeedback 生成和发送流程指南
网络·音视频·webrtc·媒体
metaRTC4 天前
webRTC IPC客户端Flutter版编程指南
flutter·webrtc·ipc
ZEGO即构开发者4 天前
WebRTC 实战:用即构 SDK 搭建 Web 端 1v1 视频通话(含完整流程与 Demo)
前端·音视频·webrtc
RTC老炮5 天前
webrtc降噪-SpeechProbabilityEstimator类源码分析与算法原理
算法·webrtc
赖small强6 天前
【ZeroRange WebRTC】Amazon Kinesis音视频传输通路详细分析:ICE完成后的数据传输流程
webrtc·ice·dtls·音视频传输·srtp