AI视觉领域流媒体知识入门介绍(一)

流媒体常见传输协议

RTSP(Real-Time Streaming Protocol)

是一种网络流媒体传输协议,可用于从网络摄像头等设备中获取实时视频流。许多网络摄像头和视频服务器都支持RTSP协议。

HLS(HTTP Live Streaming)

是一种基于HTTP的流媒体传输协议,主要用于在互联网上直播和点播视频流。

HLS使用分段技术,将视频流分成多个小段,并通过HTTP协议分发到客户端。

HLS是基于文件的,而要把流写入文件一定是以I帧为单位,因此HLS延迟可能高达2GOP,等到第一个I帧然后再将接下来的一个GOP写入文件。

WebRTC(Web Real-Time Communication)

是一种开放源代码的实时通信协议,可用于在浏览器之间进行点对点视频通话和数据传输。WebRTC支持UDP和TCP传输协议,并具有低延迟和高可靠性。

WebSocket

在浏览器直播摄像头实时流时,可通过ws传输flv格式的视频数据。

FLV:Flash Video

是一种网络视频格式,内容体积小,视频质量高。

流媒体常见处理框架

OpenCV

是一个开源的计算机视觉库,可用于处理图像和视频。它支持多种编程语言,包括C++、Python和Java等。

FFmpeg

是一个开源的多媒体框架,可用于处理音频、视频和流媒体。它支持多种编解码器和容器格式,并具有高度可定制的特性。

GStreamer

是一个基于Linux的多媒体框架,可用于处理音频和视频。它支持多种编解码器和容器格式,并具有高度可定制的插件体系结构。

mediapipe

Google开源的,对AI和ML友好的流媒体处理框架。

可以直接使用其提供的Solution,在自己的AI视觉解决方案中;

也可以使用其提供的Framework,开发自己的流媒体应用。

GitHub - google/mediapipe: Cross-platform, customizable ML solutions for live and streaming media.

Monibuca

开源Go语言流媒体服务器开发框架

Monibuca - GO语言开源插件式流媒体服务器开发框架 | Monibuca

相关推荐
缓慢更新5 分钟前
AI 辅助生成单测:从接口定义到用例的流水线
java·服务器·前端·网络·数据库·人工智能
AI小百科10 分钟前
向量数据库:AI 的「记忆仓库」是怎么工作的
数据库·人工智能·oracle
热文新讯10 分钟前
迎进博·话疗愈:2026酒店“疗愈睡眠”闭门研讨会在沪举行
大数据·人工智能·物联网
超级架构师16 分钟前
PRAXO-CORE 2.5.0:用 conformance 和显式边界构建 Go Agent 框架
开发语言·人工智能·后端·golang·ai编程·智能体框架·praxo-core
深圳市快瞳科技有限公司20 分钟前
野外鸟类AI识别落地实录:输入适配、结构化输出、去重聚合与置信度分流的工程实践
算法·计算机视觉·鸟类识别·鸟类ai识别·野外鸟类观测·林业调查
老金带你玩AI1 小时前
ChatGPT 12月合并额度:以后提问还得先打草稿?
人工智能
久曲健的测试窝1 小时前
2026软件测试工具选型指南:双模式如何化解UI脚本维护难题
运维·人工智能·科技·aigc
CQU_JIAKE2 小时前
10.30【大模型】
人工智能
LMT流氓兔2 小时前
第五单元——第十六课:给书店助手加上网页界面
java·开发语言·jvm·人工智能·oracle·langchain·1024程序员节
小许学java2 小时前
AI通识与基础
人工智能·langchain