硬件视频编解码(一)

所谓硬件视频编解码,其实本质就是将视频编码和视频解码做成单独的硬件IP,本质还是图像处理的IP。但是编解码因为协议众多,比如AVC(又叫H.264),HEVC(又叫H.265),VVC(又叫H.266),AV1, AV2,AVS2,AVS3等,其实不同协议的差距主要是编码工具上。

首先介绍这一块的行业工作,包括以下:

(1)软件算法工程师,主要在直播平台,比如快手/抖音/Bilibili 从事于编解码算法研发,主要是x264/x265还有一系列自研的软件编解码器。

(2)硬件算法工程师,主要在端侧芯片公司以及IP公司,比如Chips&Media, 芯原VPU,ARM中国玲珑等做自研IP的编解码算法。端侧因为成本原因,编解码器的面积优化和裁剪占据一席之地,比如大部分端侧低阶的产品主要是编码器,且是没有B帧的。如果是边侧,一般对解码性能要求比较高。至于云端,目前看到最新的昇腾都不放编解码只放JPEG/图像处理。做自研GPU等公司还是会放编解码,比如摩尔线程/沐熙等。

(3)驱动工程师。这一块其实是市场上岗位最多的,简单来说做Chips&Media / 芯原驱动开发的岗位居多。前者有firmware,大幅度降低驱动开发难度。还有一些公司自己做的一些框架,比如hisi/rk的MPP等。再往上层,还有一些FFmpeg/Gstreamer/VAAPI/Vulkan/CUDA框架的适配等。

(4)数字IC工程师,设计方面,个人感觉,编解码IP开发难度还是挺大的,并且开发周期长,且行业岗位其实不多。至于验证,实在不知道有啥好验证,编码就是配置一系列参数,看码流跟Cmodel输出是否一致。解码就是配置一系列码流,看输出的yuv跟Cmodel输出是否一致。如果是专门做这个方向的验证,收益不大。

相关推荐
Industio_触觉智能2 天前
瑞芯微RK平台视频硬解排障指南-下|板端实测记录
音视频·视频编码·视频编解码·零拷贝·gstreamer·视频解码·rk3576
智能直播6 天前
RK3576 + NDI 框架:HX2 编码输出与 HX2/FULL介绍
音视频·实时音视频·视频编解码
Industio_触觉智能7 天前
瑞芯微RK平台视频硬解排障指南-上|编解码、GStreamer与零拷贝全解析
视频编码·视频编解码·零拷贝·gstreamer·视频解码·rk3576
常州晟凯电子科技9 天前
8路CVBS/AHD模拟视频编码器评测
音视频·视频编解码
VidDown10 天前
上线三个月后的第一次事故:一个 Django 服务的日志、监控与故障复盘
数据库·python·django·wpf·音视频·视频编解码
VidDown10 天前
24fps 转 25fps 不只是改个数字:帧率转换、PAL/NTSC 与音频补偿
python·网络协议·音视频·视频编解码·视频
常州晟凯电子科技11 天前
8路CVBS/AHD合成一路视频无线传输系统评测
音视频·视频编解码
智能直播11 天前
网络RTMP拉流不卡顿、声音不同步,一文讲透缓冲区、时间戳
开发语言·ffmpeg·php·音视频·视频编解码
智能直播11 天前
RK3528 V4L2 框架 UVC 接口自动获取 H.264 / MJPEG / YUYV 格式:从内核采集到硬解分发
java·网络·实时音视频·视频编解码·h.264
常州晟凯电子科技13 天前
多对一无线视频传输系统评测
音视频·视频编解码