uniapp截取视频画面帧

前言

最近开发中遇到这么一个需求,上传视频文件的时候需要截取视频的一部分画面来供选择,作为视频的封面,截取画面可以使用canvas来实现,将视频画面画进canvas里,再通过canvas来生成文件对象和一个预览的url

逻辑层和视图层

想要将视频画进canvas里就需要操作dom,但是在uniapp中我们是无法操作dom的,微信uniapp的app端逻辑层和视图层是分离的,renderjs运行的层叫【视图层】,uniapp原生script叫【逻辑层】,会产生一个副作用就是是在造成了两层之间通信阻塞

所以uniapp推出了renderjsrenderjs是一个运行在视图层的js,可以让我们在视图层操作dom,但是不能直接调用,需要在dom元素中绑定某个值,当值发生改变就会触发视图层的事件

js 复制代码
// 视图层
// module为renderjs模块的名称,通过 模块名.事件 来调用事件
<script module="capture" lang="renderjs"></script>

// 逻辑层
// prop为绑定的值,名字可以随便起,但是要和change后面一致
// 当prop绑定的值发生改变就会触发capture模块的captures事件
<view style="display: none;" :prop="tempFilePath" :change:prop="capture.captures"></view>
js 复制代码
<template>
    <view class="container">
        <view style="display: none;" :prop="tempFilePath" :change:prop="capture.captures"></view>
    </view>
</template>

<script>
    export default {
        data() {
            return {
                tempFilePath: ''
            }
        },
        mounted() {
           this.tempFilePath = 'aaaaaaaaaaaaaaaa'
        }
    }
</script>

<script module="capture" lang="renderjs">
    export default {
        methods: {
            captures(tempFilePath) {
                console.log(tempFilePath);
            },
        }
    }
</script>

截取画面帧

我们先获取到视频的信息,通过uni.chooseVideo(OBJECT)这个api我们可以拿到视频的临时文件路径,然后再将临时路径交给renderjs去进行截取操作

定义一个captureFrame 方法,方法接收两个参数:视频的临时文件路径截取的时间 。先创建video元素,设置video元素的currentTime属性(视频播放的当前位置)的值为截取的时间,由于video元素没有加到dom上,video播放到currentTime结束

并设置video元素的autoplay 自动播放属性为true,但是由于浏览器的限制video无法自动播放,但是静音状态下可以自动播放,所以还要将video元素的muted 属性设为true,最后再将src属性设置为视频的临时文件路径,当video元素可以播放的时候就可以将video元素画进canvas里了

js 复制代码
captureFrame(vdoSrc, time = 0) {
    return new Promise((resolve) => {
        const vdo = document.createElement('video')
        // video元素没有加到dom上,video播放到currentTime(当前帧)结束
        // 定格时间,截取帧
        vdo.currentTime = time
        // 设置自动播放,不播放是黑屏状态,截取不到帧画面
        // 静音状态下允许自动播放
        vdo.muted = true
        vdo.autoplay = true
        vdo.src = vdoSrc
        vdo.oncanplay = async () => {
            const frame = await this.drawVideo(vdo)
            resolve(frame)
        }
    })
},

然后再定义一个drawVideo方法用于绘制视频,接收一个video元素参数,在方法中创建一个canvas元素,将canvas元素的宽高设置为video元素的宽高,通过drawImage 方法将视频画进canvas里,再通过toBlob 方法创建Blob对象,然后通过URL.createObjectURL() 创建一个指向blob对象的临时url,blob对象可以用来上传,url可以用来预览

js 复制代码
drawVideo(vdo) {
    return new Promise((resolve) => {
        const cvs = document.createElement('canvas')
        const ctx = cvs.getContext('2d')
        cvs.width = vdo.videoWidth
        cvs.height = vdo.videoHeight
        ctx.drawImage(vdo, 0, 0, cvs.width, cvs.height)

        // 创建blob对象
        cvs.toBlob((blob) => {
            resolve({
                blob,
                url: URL.createObjectURL(blob),
            })
        })
    })
}

最后我们就可以在触发视图层的事件里去使用这两个方法来截取视频画面帧了,最后将数据传递返回给逻辑层,通过this.$ownerInstance.callMethod() 向逻辑层发送消息并将数据传递过去

js 复制代码
// 视图层
async captures(tempFilePath) {
    let duration = await this.getDuration(tempFilePath)
    let list = []
    for (let i = 0; i < duration; i++) {
        const frame = await this.captureFrame(tempFilePath, duration / 10 * i)
        list.push(frame)
    }
    this.$ownerInstance.callMethod('captureList', {
        list,
        duration
    })
},
getDuration(tempFilePath) {
    return new Promise(resolve => {
        const vdo = document.createElement('video')
        vdo.src = tempFilePath
        vdo.addEventListener('loadedmetadata', () => {
            const duration = Math.floor(vdo.duration);
            vdo.remove();
            resolve(duration)
        });
    })
},

// 逻辑层
captureList({
    list,
    duration
}) {
    // 操作......
}

运行

最后运行起来,发现报了一个错误:Failed to execute 'toBlob' on 'HTMLCanvasElement': Tainted canvases may not be exported ,这是因为由于浏览器的安全考虑,如果在使用canvas绘图的过程中,使用到了外域的资源,那么在toBlob()时会抛出异常,设置video元素的crossOrigin属性值为anonymous就行了

app端 h5
相关推荐
Мартин.3 小时前
[Meachines] [Easy] Sea WonderCMS-XSS-RCE+System Monitor 命令注入
前端·xss
昨天;明天。今天。4 小时前
案例-表白墙简单实现
前端·javascript·css
数云界4 小时前
如何在 DAX 中计算多个周期的移动平均线
java·服务器·前端
风清扬_jd4 小时前
Chromium 如何定义一个chrome.settingsPrivate接口给前端调用c++
前端·c++·chrome
安冬的码畜日常4 小时前
【玩转 JS 函数式编程_006】2.2 小试牛刀:用函数式编程(FP)实现事件只触发一次
开发语言·前端·javascript·函数式编程·tdd·fp·jasmine
ChinaDragonDreamer4 小时前
Vite:为什么选 Vite
前端
小御姐@stella4 小时前
Vue 之组件插槽Slot用法(组件间通信一种方式)
前端·javascript·vue.js
GISer_Jing4 小时前
【React】增量传输与渲染
前端·javascript·面试
eHackyd4 小时前
前端知识汇总(持续更新)
前端
小雨cc5566ru7 小时前
uniapp+Android面向网络学习的时间管理工具软件 微信小程序
android·微信小程序·uni-app