模拟 GStreamer 获取帧率能力:CIF 与 ISP 的差异

模拟 GStreamer 获取帧率能力:CIF 与 ISP 的差异

在使用 GStreamer (gst-launch-1.0) 搭建视频采集管道时,我们通常会在 caps 中指定分辨率、像素格式和帧率,例如:

bash 复制代码
gst-launch-1.0 v4l2src device=/dev/video0 ! \
  video/x-raw,format=NV12,width=1920,height=1080,framerate=60/1 ! \
  mpph264enc ! h264parse ! matroskamux ! \
  filesink location=/home/firefly/capture.mkv

这里的 framerate=60/1 并不是随意写的,而是来自 V4L2 驱动的能力枚举。GStreamer 在启动时会调用 V4L2 的 ioctl 来查询设备支持的格式、分辨率和帧率。


V4L2 查询帧率的命令

我们可以用 v4l2-ctl 来模拟 GStreamer 的查询过程:

bash 复制代码
v4l2-ctl -d /dev/video0 --list-frameintervals width=3864,height=2192,pixelformat=NV12

这条命令会触发驱动的 VIDIOC_ENUM_FRAMEINTERVALS 回调,返回该分辨率和像素格式下支持的帧率。


ISP 与 CIF 的差异

在 Rockchip 平台上,通常:

  • /dev/video11 → ISP 路径
  • /dev/video0 → CIF 路径

两者在 enum_frameintervals 的实现上有明显不同。

1. ISP 路径 (rkisp_enum_frameintervals)

源码片段:

c 复制代码
fival->type = V4L2_FRMIVAL_TYPE_CONTINUOUS;
fival->stepwise.min = fi.interval;   // 来自 sensor g_frame_interval
  • ISP 返回 连续型 (CONTINUOUS) 帧率能力。
  • 如果 sensor 没实现 g_frame_interval,就 fallback 到默认 30fps。
  • 上层(如 GStreamer)认为"从这个最小值开始都合法",所以 caps negotiation 很宽松,看起来你随便写 framerate=25/1framerate=60/1 都能通过。

2. CIF 路径 (rkcif_enum_frameintervals)

源码片段:

c 复制代码
if (dev->hw_dev->adapt_to_usbcamerahal) {
    fival->type = V4L2_FRMIVAL_TYPE_DISCRETE;
    fival->discrete = fi.interval;
} else {
    fival->type = V4L2_FRMIVAL_TYPE_CONTINUOUS;
    fival->stepwise.min = fi.interval;
}
  • CIF 返回 离散型 (DISCRETE) 帧率能力。

  • 如果 sensor 没实现 g_frame_interval,理论上应该 fallback 到 30fps。

  • 但如果返回值错误(例如分母=0),上层 GStreamer 就会报错:

    复制代码
    gst_value_set_fraction: assertion 'denominator != 0' failed

    导致 pipeline negotiation 失败。


实际现象

  • ISP 节点 (video11)

    → 返回 continuous,caps negotiation 宽松,随便写 fps 不报错。

    → 实际运行还是按照 sensor 的真实 fps。

  • CIF 节点 (video0)

    → 返回 discrete,caps negotiation 严格,必须匹配正确的 fps。

    → 如果驱动返回非法值(如分母=0),GStreamer 直接报错,pipeline 无法启动。


总结

  • GStreamer 获取帧率能力时,底层调用的是 VIDIOC_ENUM_FRAMEINTERVALS
  • ISP 路径返回 连续型能力 → 宽松,不报错。
  • CIF 路径返回 离散型能力 → 严格,必须正确,否则 negotiation 失败。
  • 如果 sensor 没实现 g_frame_interval,ISP 会 fallback 到 30fps,而 CIF 如果处理不当,就可能返回非法值,导致上层报错。

相关推荐
啊阿狸不会拉杆4 小时前
《计算机网络-自顶向下方法》5.4 ISP之间的路由选择:BGP 读书笔记
网络·计算机网络·接口隔离原则
徐小黑ACG5 小时前
nginx配置文件
linux·服务器·nginx
新时代牛马5 小时前
Linux VFS 完整篇:从path_openat、dentry/inode 到page cache 与挂载排障
linux·运维·服务器
Delite8025 小时前
摆脱实验室束缚:便携式卡尔费休微量水分检测技术与现场应用解析
大数据·网络·人工智能
java_logo5 小时前
Docker 部署 Rocky Linux:轻松搭建 RHEL 兼容企业级基础镜像平台
linux·docker·容器·rocky linux·基础镜像·轩辕镜像·rhel 兼容
拂拉氏5 小时前
【知识讲解】 Linux虚拟地址空间认识
linux·虚拟地址空间
ACP广源盛139246256735 小时前
M6/M5 Pro Mac mini 端侧 AI 落地@ACP#YLB3116 中端多盘存储扩展在 AI 服务中的机会与应用场景
大数据·网络·数据库·人工智能·嵌入式硬件·macos
ACP广源盛139246256736 小时前
M6/M5 Pro Mac mini 端侧 AI 新形态@ACP#GSV5800 Serdes 长距离视频传输在 AI 服务中的机会与落地场景
大数据·网络·数据库·人工智能·嵌入式硬件·macos·音视频
我爱cope6 小时前
【计算机网络 | 传输层3:TCP 协议概述:面向连接、可靠传输到底意味着什么?】
网络·网络协议·学习·tcp/ip·计算机网络·传输层
新时代牛马7 小时前
Linux 驱动中断与定时完整篇:从 request_threaded_irq 到hrtimer 选型与排障
linux·运维·服务器