AI视觉领域流媒体知识入门介绍(一)

流媒体常见传输协议

RTSP(Real-Time Streaming Protocol)

是一种网络流媒体传输协议,可用于从网络摄像头等设备中获取实时视频流。许多网络摄像头和视频服务器都支持RTSP协议。

HLS(HTTP Live Streaming)

是一种基于HTTP的流媒体传输协议,主要用于在互联网上直播和点播视频流。

HLS使用分段技术,将视频流分成多个小段,并通过HTTP协议分发到客户端。

HLS是基于文件的,而要把流写入文件一定是以I帧为单位,因此HLS延迟可能高达2GOP,等到第一个I帧然后再将接下来的一个GOP写入文件。

WebRTC(Web Real-Time Communication)

是一种开放源代码的实时通信协议,可用于在浏览器之间进行点对点视频通话和数据传输。WebRTC支持UDP和TCP传输协议,并具有低延迟和高可靠性。

WebSocket

在浏览器直播摄像头实时流时,可通过ws传输flv格式的视频数据。

FLV:Flash Video

是一种网络视频格式,内容体积小,视频质量高。

流媒体常见处理框架

OpenCV

是一个开源的计算机视觉库,可用于处理图像和视频。它支持多种编程语言,包括C++、Python和Java等。

FFmpeg

是一个开源的多媒体框架,可用于处理音频、视频和流媒体。它支持多种编解码器和容器格式,并具有高度可定制的特性。

GStreamer

是一个基于Linux的多媒体框架,可用于处理音频和视频。它支持多种编解码器和容器格式,并具有高度可定制的插件体系结构。

mediapipe

Google开源的,对AI和ML友好的流媒体处理框架。

可以直接使用其提供的Solution,在自己的AI视觉解决方案中;

也可以使用其提供的Framework,开发自己的流媒体应用。

GitHub - google/mediapipe: Cross-platform, customizable ML solutions for live and streaming media.

Monibuca

开源Go语言流媒体服务器开发框架

Monibuca - GO语言开源插件式流媒体服务器开发框架 | Monibuca

相关推荐
nenchoumi3119几秒前
VLA 论文精读(十六)FP3: A 3D Foundation Policy for Robotic Manipulation
论文阅读·人工智能·笔记·学习·vln
后端小肥肠10 分钟前
文案号搞钱潜规则:日入四位数的Coze工作流我跑通了
人工智能·coze
LCHub低代码社区12 分钟前
钧瓷产业原始创新的许昌共识:技术破壁·产业再造·生态重构(一)
大数据·人工智能·维格云·ai智能体·ai自动化·大禹智库·钧瓷码
-曾牛12 分钟前
Spring AI 快速入门:从环境搭建到核心组件集成
java·人工智能·spring·ai·大模型·spring ai·开发环境搭建
阿川201516 分钟前
云智融合普惠大模型AI,政务服务重构数智化路径
人工智能·华为云·政务·deepseek
自由鬼44 分钟前
开源AI开发工具:OpenAI Codex CLI
人工智能·ai·开源·软件构建·开源软件·个人开发
生信碱移1 小时前
大语言模型时代,单细胞注释也需要集思广益(mLLMCelltype)
人工智能·经验分享·深度学习·语言模型·自然语言处理·数据挖掘·数据可视化
一个数据大开发1 小时前
解读《数据资产质量评估实施规则》:企业数据资产认证落地的关键指南
大数据·数据库·人工智能
云卓SKYDROID1 小时前
无人机环境适应性与稳定性技术要点!
人工智能·无人机·科普·高科技·云卓科技
硅谷秋水2 小时前
通过模仿学习实现机器人灵巧操作:综述(上)
人工智能·深度学习·机器学习·计算机视觉·语言模型·机器人