深度学习视频编解码开源项目介绍【持续更新】

DVC (Deep Video Compression)

  1. 介绍:DVC (Deep Video Compression) 是一个基于深度学习的视频压缩框架,它的目标是通过深度神经网络来提高视频编码的效率,并降低比特率,同时尽可能保持视频质量。DVC 是一个端到端的神经网络模型,它在压缩视频时利用了视频帧之间的时间冗余和空间冗余来进行优化,特别是通过光流估计和预测帧来减少需要编码的比特数。
  2. GitHubhttps://github.com/GuoLusjtu/DVC

VCT (Video Compression Transformer)

  1. 介绍:VCT (Video Compression Transformer) 是一种基于 Transformer 的深度学习视频压缩模型,旨在利用 Transformer 架构强大的长程依赖建模能力,在视频压缩中实现更高效的压缩性能和更优的视觉质量。与传统的卷积神经网络(CNN)相比,Transformer 擅长处理具有长距离依赖关系的数据,这使得它在视频编码中能够更好地捕捉帧之间的全局信息,从而提高压缩效率。
  2. GitHubhttps://github.com/google-research/google-research/tree/master/vct

Scale-Space Flow (SSF)

  1. 介绍:Scale-Space Flow (SSF) 是一种基于深度学习的视频压缩方法,它通过结合多尺度光流估计和深度神经网络,优化视频压缩中的时空冗余。SSF 的核心思想是通过提取视频中的时空特征,尤其是视频帧之间的运动信息(光流),来有效地压缩视频数据。这个方法主要应用于提高视频压缩的效率,同时保持较高的视觉质量。

  2. 论文地址基于尺度空间流的端到端视频压缩优化方法

OpenDVC

  1. 介绍:OpenDVC 是一个开源的深度学习视频压缩框架,旨在通过深度学习方法优化视频编码和压缩,类似于其他深度学习视频压缩框架,如 DVC (Deep Video Compression)。OpenDVC 提供了一个基于深度神经网络的视频编码器和解码器,旨在显著提高视频压缩效率,同时保持高质量的视觉效果。与传统的视频编码标准(如 H.264 和 HEVC)相比,OpenDVC 利用神经网络模型来自动学习视频的时空特征,从而进行更高效的压缩。
  2. GitHubhttps://github.com/RenYang-home/OpenDVC

DCVC (Deep Contextual Video Compression)

  1. 介绍:DCVC (Deep Contextual Video Compression) 是一种基于深度学习的视频压缩方法,它采用深度神经网络来提高视频压缩的效率,并着重于利用视频中的上下文信息来优化编码和解码过程。DCVC 旨在通过深度学习的方式,从视频的上下文信息中提取更加精准的特征,进而提高压缩率和视频质量。
  2. GitHubhttps://github.com/microsoft/DCVC

CompressAI

  1. 介绍:CompressAI 是一个开源的深度学习视频和图像压缩框架,旨在通过深度学习技术提供高效的图像和视频压缩算法。该框架是由 InterDigital 研究团队开发的,旨在推动现代深度学习方法在数据压缩中的应用。CompressAI 支持基于神经网络的图像和视频压缩模型,涵盖了从端到端训练的压缩方法到基于学习的图像和视频编码器/解码器架构。

  2. GitHubhttps://github.com/InterDigitalInc/CompressAI

NeRV (Neural Representation for Videos)

  1. 介绍 :NeRV (Neural Representation for Videos) 是一种基于神经网络的视频表示方法,旨在通过神经网络学习和表示视频数据的高效压缩形式。它的核心思想是使用神经网络作为压缩和重建的工具,将视频内容映射到一个低维度的潜在空间,从而达到高效的视频压缩和重建。
    NeRV 采用了一种神经表示(Neural Representation)方法,不同于传统的视频压缩方法(如 H.264、HEVC、VVC 等),NeRV 利用深度神经网络的强大表达能力,去学习视频帧的低维表示,并通过这种表示来进行视频的高效编码与解码。
  2. GitHubhttps://github.com/haochen-rye/NeRV
相关推荐
昨日之日20061 小时前
Wan2.2-S2V - 音频驱动图像生成电影级质量的数字人视频 ComfyUI工作流 支持50系显卡 一键整合包下载
人工智能·音视频
SEO_juper4 小时前
大型语言模型SEO(LLM SEO)完全手册:驾驭搜索新范式
人工智能·语言模型·自然语言处理·chatgpt·llm·seo·数字营销
攻城狮7号5 小时前
腾讯混元翻译模型Hunyuan-MT-7B开源,先前拿了30个冠军
人工智能·hunyuan-mt-7b·腾讯混元翻译模型·30个冠军
zezexihaha5 小时前
从“帮写文案”到“管生活”:个人AI工具的边界在哪?
人工智能
算家云5 小时前
nano banana官方最强Prompt模板来了!六大场景模板详解
人工智能·谷歌·ai大模型·算家云·ai生图·租算力,到算家云·nano banana 提示词
暴躁的大熊5 小时前
AI助力决策:告别生活与工作中的纠结,明析抉择引领明智选择
人工智能
Gyoku Mint5 小时前
提示词工程(Prompt Engineering)的崛起——为什么“会写Prompt”成了新技能?
人工智能·pytorch·深度学习·神经网络·语言模型·自然语言处理·nlp
梁小憨憨5 小时前
zotero扩容
人工智能·笔记
大数据张老师5 小时前
AI架构师的思维方式与架构设计原则
人工智能·架构师·ai架构·后端架构
AKAMAI5 小时前
Entity Digital Sports 降低成本并快速扩展
人工智能·云计算