webrtc 联播数据编码发送流程

文章目录

  • [webrtc 联播数据编码发送流程](#webrtc 联播数据编码发送流程)
    • [1 创建 VideoSendStreamImpl](#1 创建 VideoSendStreamImpl)
    • [2 创建RTPSenderVideo](#2 创建RTPSenderVideo)
    • [3 创建编码器](#3 创建编码器)
    • [4 编码后数据流向](#4 编码后数据流向)

webrtc 联播数据编码发送流程

1 创建 VideoSendStreamImpl

c++ 复制代码
WebRtcVideoChannel::WebRtcVideoSendStream::RecreateWebRtcStream
media/engine/webrtc_video_engine.h
->
CreateVideoSendStream
call/call.h
参数: config
webrtc::VideoSendStream::Config config
ebrtc::VideoEncoderConfig encoder_config
->
CreateVideoStreamEncoder
video/video_send_stream.h
    ->
    VideoStreamEncoder
    video/video_stream_encoder.h
    备注: 这是只是创建了VideoStreamEncoder, 并没有创建真正的编码类
->
VideoSendStreamImpl::VideoSendStreamImpl()
video/video_send_stream_impl.h

2 创建RTPSenderVideo

c++ 复制代码
RtpVideoSenderInterface* RtpTransportControllerSend::CreateRtpVideoSender
call/rtp_transport_controller_send.h
->	
RtpVideoSender::RtpVideoSender
call/rtp_video_sender.h
// 参数:const RtpConfig& rtp_config,
->
std::vector<RtpStreamSender> CreateRtpStreamSenders
call/rtp_video_sender.cc
for (size_t i = 0; i < rtp_config.ssrcs.size(); ++i) {
    auto sender_video = std::make_unique<RTPSenderVideo>(video_config);
    rtp_streams.emplace_back(std::move(playout_delay_oracle),
                             std::move(rtp_rtcp), std::move(sender_video));
}
// 遍历rtp_config.ssrcs 创建:RtpStreamSender 创建RTPSenderVideo	

3 创建编码器

c++ 复制代码
VideoStreamEncoder::OnFrame
video/video_stream_encoder.h
->
VideoStreamEncoder::MaybeEncodeVideoFrame
video/video_stream_encoder.h
->
VideoStreamEncoder::ReconfigureEncoder()
video/video_stream_encoder.h
->  
EncoderStreamFactory::CreateEncoderStreams
media/engine/webrtc_video_engine.h
作用: 将 encoder_config 中的联播信息 设置到 std::vector<webrtc::VideoStream> streams
->
获取编码参数:
VideoCodec codec;
if (!VideoCodecInitializer::SetupCodec(encoder_config_, streams, &codec)) {
    RTC_LOG(LS_ERROR) << "Failed to create encoder configuration.";
}
将streams 的联播信息 拷贝到 codec.simulcastStream[]
->
VideoEncoder::InitEncode(const VideoCodec* codec_settings,
                             const VideoEncoder::Settings& settings)
modules/video_coding/codecs/h264/h264_encoder_impl.h
// 1 将VideoCodec联播信息 设置到 h264编码器中
// 2 同时也会创建多个h264编码器
    
创建编码器用的主要联播参数是: encoder_config,  创建RTPSenderVideo 主要的联播参数是:webrtc::VideoSendStream::Config::RtpConfig rtp;

4 编码后数据流向

c++ 复制代码
 H264EncoderImpl::Encode
 modules/video_coding/codecs/h264/h264_encoder_impl.h
 ->
 VideoStreamEncoder::OnEncodedImage
 video/video_stream_encoder.h
 ->
 VideoSendStreamImpl::OnEncodedImage
 video/video_send_stream_impl.h
 ->
 RtpVideoSender::OnEncodedImage
 call/rtp_video_sender.h
 ->
 rtp_streams_[stream_index].sender_video->SendVideo
 // 不同编码的数据通过不同的RTPSenderVideo发送数据
相关推荐
911hzh6 小时前
Flutter WebRTC iOS 原理解析:从 getUserMedia 到 Texture,讲清视频采集、纹理渲染与远端通话链路
flutter·ios·webrtc
shao9185168 小时前
第12章Streaming(下):视频应用(1)——项目八:基于WebRTC+YOLO的实时目标检测
yolo·目标检测·webrtc·gradio·视频流·yolov10·流式传输
三十_1 天前
WebRTC 远端画面无法显示:ICE 与 SDP 时序问题深度解析与解决方案
webrtc
metaRTC3 天前
metaRTC8 成功适配 RTOS:开启 MCU/嵌入式实时音视频新时代
单片机·嵌入式硬件·webrtc·实时音视频·rtos
Fisher3Star3 天前
mediasoup中ip与announceAddress配置要点
webrtc·sdp
小柯博客4 天前
Amazon Kinesis Video Streams C WebRTC SDK 开发实战
c语言·开发语言·网络·stm32·嵌入式硬件·webrtc·yocto
RTC老炮5 天前
WebRTC下FlexFEC算法架构及原理
网络·算法·音视频·webrtc
换个昵称都难6 天前
webrtc源码下载(2026年4月)
webrtc
牛奶6 天前
不经过服务器,两个人怎么直接通话?
前端·websocket·webrtc
RTC老炮7 天前
音视频FEC前向纠错算法Reed-Solomon原理分析
网络·算法·架构·音视频·webrtc