webrtc 联播数据编码发送流程

文章目录

  • [webrtc 联播数据编码发送流程](#webrtc 联播数据编码发送流程)
    • [1 创建 VideoSendStreamImpl](#1 创建 VideoSendStreamImpl)
    • [2 创建RTPSenderVideo](#2 创建RTPSenderVideo)
    • [3 创建编码器](#3 创建编码器)
    • [4 编码后数据流向](#4 编码后数据流向)

webrtc 联播数据编码发送流程

1 创建 VideoSendStreamImpl

c++ 复制代码
WebRtcVideoChannel::WebRtcVideoSendStream::RecreateWebRtcStream
media/engine/webrtc_video_engine.h
->
CreateVideoSendStream
call/call.h
参数: config
webrtc::VideoSendStream::Config config
ebrtc::VideoEncoderConfig encoder_config
->
CreateVideoStreamEncoder
video/video_send_stream.h
    ->
    VideoStreamEncoder
    video/video_stream_encoder.h
    备注: 这是只是创建了VideoStreamEncoder, 并没有创建真正的编码类
->
VideoSendStreamImpl::VideoSendStreamImpl()
video/video_send_stream_impl.h

2 创建RTPSenderVideo

c++ 复制代码
RtpVideoSenderInterface* RtpTransportControllerSend::CreateRtpVideoSender
call/rtp_transport_controller_send.h
->	
RtpVideoSender::RtpVideoSender
call/rtp_video_sender.h
// 参数:const RtpConfig& rtp_config,
->
std::vector<RtpStreamSender> CreateRtpStreamSenders
call/rtp_video_sender.cc
for (size_t i = 0; i < rtp_config.ssrcs.size(); ++i) {
    auto sender_video = std::make_unique<RTPSenderVideo>(video_config);
    rtp_streams.emplace_back(std::move(playout_delay_oracle),
                             std::move(rtp_rtcp), std::move(sender_video));
}
// 遍历rtp_config.ssrcs 创建:RtpStreamSender 创建RTPSenderVideo	

3 创建编码器

c++ 复制代码
VideoStreamEncoder::OnFrame
video/video_stream_encoder.h
->
VideoStreamEncoder::MaybeEncodeVideoFrame
video/video_stream_encoder.h
->
VideoStreamEncoder::ReconfigureEncoder()
video/video_stream_encoder.h
->  
EncoderStreamFactory::CreateEncoderStreams
media/engine/webrtc_video_engine.h
作用: 将 encoder_config 中的联播信息 设置到 std::vector<webrtc::VideoStream> streams
->
获取编码参数:
VideoCodec codec;
if (!VideoCodecInitializer::SetupCodec(encoder_config_, streams, &codec)) {
    RTC_LOG(LS_ERROR) << "Failed to create encoder configuration.";
}
将streams 的联播信息 拷贝到 codec.simulcastStream[]
->
VideoEncoder::InitEncode(const VideoCodec* codec_settings,
                             const VideoEncoder::Settings& settings)
modules/video_coding/codecs/h264/h264_encoder_impl.h
// 1 将VideoCodec联播信息 设置到 h264编码器中
// 2 同时也会创建多个h264编码器
    
创建编码器用的主要联播参数是: encoder_config,  创建RTPSenderVideo 主要的联播参数是:webrtc::VideoSendStream::Config::RtpConfig rtp;

4 编码后数据流向

c++ 复制代码
 H264EncoderImpl::Encode
 modules/video_coding/codecs/h264/h264_encoder_impl.h
 ->
 VideoStreamEncoder::OnEncodedImage
 video/video_stream_encoder.h
 ->
 VideoSendStreamImpl::OnEncodedImage
 video/video_send_stream_impl.h
 ->
 RtpVideoSender::OnEncodedImage
 call/rtp_video_sender.h
 ->
 rtp_streams_[stream_index].sender_video->SendVideo
 // 不同编码的数据通过不同的RTPSenderVideo发送数据
相关推荐
换个昵称都难18 小时前
webrtc 拥塞控制GCC 和PCC
webrtc
Cxiaomu19 小时前
React接入WebRTC实时视频实践
react.js·音视频·webrtc
AndyHuang19761 天前
WebRTC 强制 Relay 模式下 TCP 重连失败深度排查与优化实战
webrtc
换个昵称都难1 天前
webrtc pacing 平滑发包模块
webrtc
换个昵称都难1 天前
webrtc 音频混音介绍
音视频·webrtc
换个昵称都难2 天前
webrtc QOS-RemoteBitrateEstimator接收端带宽估计(1)
webrtc
换个昵称都难2 天前
webrtc QOS-RemoteBitrateEstimator接收端带宽估计-四个实例(2)
webrtc
都在酒里2 天前
【极致低延时】香橙派部署 MediaMTX 实现 WebRTC 推流,延时仅 500-800ms,比局域网 ffmpeg 拉流快近 10 倍!(附踩坑全记录)
linux·arm开发·ffmpeg·webrtc·orangepi·嵌入式软件
换个昵称都难2 天前
WebRTC QoS 实战:从原理到弱网优化
开发语言·php·webrtc
小哈机器人2 天前
Phantom Bridge:一个基于WebRTC的ROS2远程可视化与遥操作工具
机器人·webrtc·数据可视化