音视频学习(十九)——rtsp收流(tcp方式)

前言

本文主要介绍以tcp方式实现rtsp拉流。

流程图

流程说明:

  1. 客户端发起tcp请求,如向真实相机设备请求,端口一般默认554;
  2. tcp连接成功,客户端与服务端开始rtsp信令交互;
  3. 客户端收到play命令响应后,开启线程等待接收数据,同时开启定时器,定时向服务端发送命令用于心跳保活;
  4. 服务端向客户端发送音视频数据;
  5. 客户端接收rtp数据并进行解复用;

设计

  • 发送tcp请求
    • 创建socket
    • connect
    • 设置非阻塞
    • 设置tcp超时时间
c++ 复制代码
// 建立tcp连接
m_tcpClient = std::make_shared<TcpClient>(nullptr, this);
if (!m_tcpClient.get()
    || 0 != m_tcpClient->TcpCreate()
    || 0 != m_tcpClient->TcpConnectByTime(ip.c_str(), port, 5)
    || 0 != m_tcpClient->TcpSetNoBlock(true)
    || 0 != m_tcpClient->TcpRecvTimeout(10))
    break;
  • rtsp信令交互
c++ 复制代码
// 创建command类
m_command = std::make_shared<CRtspCommand>(RTSP_TRANSPORT_RTP_TCP, m_tcpClient, m_func, m_user);
if (!m_command.get())
    break;

// 创建rtsp client
if(!m_command->CreateRtspClient(m_rtspUrl, username, userpasswd))
    break;

// 发送describe
int ret = m_command->SendDescribe();
if (0 != ret)
    break;
  • 补充:创建rtsp client,发送describe后根据回调进行后续命令操作(使用开源库ireader/librtsp进行rtsp信令交互)
c++ 复制代码
bool CRtspCommand::CreateRtspClient(const std::string& uri, const std::string& username, const std::string& userpasswd)
{
	if (uri.empty() || username.empty() || userpasswd.empty())
		return false;

	rtsp_client_handler_t handler;
	handler.send = SendCallback;
	handler.rtpport = RtpPortCallcback;
	handler.onannounce = AnnounceCallback;
	handler.ondescribe = DescribeCallback;
	handler.onsetup = SetupCallback;
	handler.onplay = PlayCallback;
	handler.onpause = PauseCallback;
	handler.onteardown = TeardownCallback;
	handler.onrtp = RtpDataCallback;

	m_rtsp = rtsp_client_create(uri.c_str(), username.c_str(), userpasswd.c_str(), &handler, this);
	if (!m_rtsp)
		return false;

	return true;
}
  • 启动线程等待接收数据
c++ 复制代码
#define RECV_DATA_SIZE (64*1024*1024)

void CRtsp::RtspWorker()
{
	std::shared_ptr<char> dataPacket(new char[RECV_DATA_SIZE], std::default_delete<char[]>());
	memset(dataPacket.get(), 0x00, RECV_DATA_SIZE);
	int recvLen = 0;

	while (m_running)
	{
		recvLen = m_tcpClient->TcpRecv(dataPacket.get(), RECV_DATA_SIZE);
		if (recvLen <= 0)       // 数据接收失败
		{
			break;
		}

		if (0 != m_command->InputData(dataPacket.get(), recvLen))
		{
			break;
		}

		memset(dataPacket.get(), 0x00, STREAM_DATA_SIZE);
	}
}
  • 启动定时器进行心跳保活(tcp方式需要)
c++ 复制代码
// 创建定时器
m_timer = std::make_shared<ZDTimer>(10, 1000);
m_timer->Start();

// 开启定时器
m_timer->AddTask(10000, [this]() {
    // 10s发送一次get parameter命令
    int count = rtsp_client_media_count((rtsp_client_t*)m_rtsp);
    if (count > 0)
        rtsp_client_get_parameter(m_rtsp, 0, NULL);
});

// 停止定时器
if (m_timer.get())
{
    m_timer->Stop();
    m_timer.reset();
}
  • 接收视频数据并解复用(使用开源库ireader/librtp库进行rtp数据解复用)
c++ 复制代码
// 1.创建解复用器
m_demuxer = rtp_demuxer_create(100, profile ? profile->frequency : 90000, payload, encoding.c_str(), RtpPacketCallback, this);

// 2. 塞数据
rtp_demuxer_input(m_demuxer, data, len);

// 3. 数据回调
static int RtpPacketCallback (void* param, const void* packet, int bytes, uint32_t timestamp, int flags)
{
   	// 裸流数据处理
}

// 4. 销毁
rtp_demuxer_destroy(&m_demuxer);

效果

相关推荐
9527华安3 小时前
FPGA纯verilog实现DP视频接口,支持2K60帧分辨率,提供3套工程源码和技术支持
fpga开发·音视频·dp
MetaEnchanter12 小时前
视频章节怎么整理:填好时间点,导出前检查这几处
音视频
沫璃染墨14 小时前
从零入门计算机网络系列(十四):TCP报文与字节流本质——从数据封装到报文边界
linux·服务器·网络·网络协议·tcp/ip·tcp
小豆庄14 小时前
测试视频里的人脸车牌敏感信息自动化脱敏方案
计算机视觉·目标跟踪·ffmpeg·音视频·边缘计算·视频·敏捷流程
光泽雨16 小时前
WPF 音视频四大核心方案对比
wpf·音视频
流浪00117 小时前
计算机网络篇17:传输层——TCP 超时重传、三次握手与四次挥手,TIME_WAIT 为什么要等 2MSL
网络协议·tcp/ip·计算机网络·三次握手·四次挥手·超时重传
揽秀亭长17 小时前
音频转乐谱如何实现?四类AI 扒谱工具的流程
音视频
敢敢のwings1 天前
SimpleMemVLA 深度解读:把原生视频上下文变成机器人的记忆
数码相机·机器人·音视频
流浪0011 天前
计算机网络篇16:传输层——TCP 报头属性字段:16 位窗口大小撑起流量控制,六个标志位标识报文类型
网络协议·tcp/ip·计算机网络·urg紧急指针·tcp报头
从琳开始9891 天前
网络原理入门(二)------OSI七层模型?TCP/IP五层(四层)模型原来是这样的
java·网络·tcp/ip·java-ee·php