ffmpeg实现视频播放 ----------- Javacv

什么是Javacv和FFmpeg?

Javacv是一个专门为Java开发人员提供的计算机视觉库,它基于FFmpeg和Opencv库,提供了许多用于处理图

像、视频和音频的功能。FFmpeg是一个开源的音视频处理工具集,它提供了用于编码、解码、转换和播放音视频

文件的库和工具。

实现视频播放的步骤

要实现音视频同步播放,我们需要完成以下几个步骤

1.加载音视频文件

2.解码音视频流

3.同步音视频播放

4.染音视频数据

运行项目需要先导入pom依赖:

java 复制代码
<properties>
        <javacpp.version>1.5.5</javacpp.version>
    </properties>
    <dependencies>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter</artifactId>
        </dependency>

        <dependency>
            <groupId>org.projectlombok</groupId>
            <artifactId>lombok</artifactId>
            <optional>true</optional>
        </dependency>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-test</artifactId>
            <scope>test</scope>
        </dependency>

<!--        javaCV依赖-->
        <dependency>
            <groupId>org.bytedeco</groupId>
            <artifactId>javacv</artifactId>
            <version>${javacpp.version}</version>
        </dependency>
        <dependency>
            <groupId>org.bytedeco</groupId>
            <artifactId>javacv-platform</artifactId>
            <version>${javacpp.version}</version>
        </dependency>


    </dependencies>

1.加载音视频文件

首先,我们需要加载音视频文件。使用Javacv的FFmpegFrameGrabber类可以轻松地加载音视频文件。

java 复制代码
​
String filePath = "path/to/video.mp4";
FFmpegFrameGrabber grabber = new FFmpegFrameGrabber(filePath);
grabber.start();

​

2.解码音视频流

加载音视频文件后,我们需要解码音视频流。使用Javacv的Frame类可以轻松地解码音视频流。

java 复制代码
​
Frame frame = nu11;
while ((frame = grabber.grabFrame()) != nul1) {
      //处理解码后的音视频数据
}

​

3.同步音视频播放

在解码音视频流之后,我们需要确保音频和视频能够同步播放。通常情况下,音频和视频的时间截是不一致的,我们可以通过比较音频和视频的时间戳来判断两者之间的差异,并进行相应的调整。

java 复制代码
​
        long audioPts = frame.timestamp;
        long videoPts = //从视频中获取时间
        long ptsDiff = audioPts - videoPts;
        if (ptsDiff > 0) {
            //音频时间较大,视频播放较慢,需要进行快进处理
        } else if (ptsDiff < 0) {
            //视频时间戳较大,音频播放较慢,需要进行快进处理
        } else {
            //音频和视频时间戳一致,正常播放
        }

​

4.染音视频数据

最后,我们需要将解码后的音视频数据染到屏幕上。使用Javacv的CanvasFrame类可以创建一个窗口,并将音频和视频数据染到窗口上。

java 复制代码
​
        CanvasFrame canvasFrame = new CanvasFrame("Video Player");
        canvasFrame.setcanvasSize(grabber.getImageWidth,grabber.getImageHeight());
        while((frame = grabber.grabFrame()) != nul1) {
            canvasFrame.showImage(frame);
        }

​

完整示例代码

下面是一个完整的示例代码,演示如何使用Javacv和FFmpeg实现音视频同步播放:

java 复制代码
import org.bytedeco.javacv.CanvasFrame;
import org.bytedeco.javacv.FFmpegFrameGrabber;
import org.bytedeco.javacv.Frame;
import org.bytedeco.javacv.FrameGrabber;


public class VideoPlayer {

    public static void main(String[] args) {
        String filePath = "d:/test/yq.mp4";
        FFmpegFrameGrabber grabber = new FFmpegFrameGrabber(filePath);
        try {
            grabber.start();
            CanvasFrame canvasFrame = new CanvasFrame("video Player");
            canvasFrame.setCanvasSize(grabber.getImageWidth(), grabber.getImageHeight());
            Frame frame = null;
            while ((frame = grabber.grabFrame()) != null) {
                canvasFrame.showImage(frame);
            }
            canvasFrame.dispose();
            grabber.stop();
        } catch (FrameGrabber.Exception e) {
            e.printStackTrace();
        }
    }

}

运行效果:

感谢大家的阅读,觉得有所帮助的朋友点点关注点点赞!

相关推荐
浮游本尊1 小时前
Java学习第22天 - 云原生与容器化
java
渣哥3 小时前
原来 Java 里线程安全集合有这么多种
java
间彧3 小时前
Spring Boot集成Spring Security完整指南
java
间彧3 小时前
Spring Secutiy基本原理及工作流程
java
Java水解4 小时前
JAVA经典面试题附答案(持续更新版)
java·后端·面试
洛小豆6 小时前
在Java中,Integer.parseInt和Integer.valueOf有什么区别
java·后端·面试
前端小张同学7 小时前
服务器上如何搭建jenkins 服务CI/CD😎😎
java·后端
ytadpole7 小时前
Spring Cloud Gateway:一次不规范 URL 引发的路由转发404问题排查
java·后端
华仔啊7 小时前
基于 RuoYi-Vue 轻松实现单用户登录功能,亲测有效
java·vue.js·后端