纵享丝滑!Cesium + ffmpegserver 生成高质量动态视频【逐帧生成】

工作中需要提供一些在三维场景下的视频动画素材,屏幕录制会出现掉帧等其他问题,看到 ffmpegserver 后,眼前一亮

Cesium + ffmpegserver 生成高质量视频

1.自建 ffmpegserver

首先,克隆 ffmpegserver 仓库代码

bash 复制代码
git clone https://github.com/greggman/ffmpegserver.js.git

安装依赖

bash 复制代码
cd ffmpegserver.js && npm install

启动服务

bash 复制代码
npm start

ffmpegserver 中有两个 demo 案例,可以打开源代码看看具体实现

效果的预览地址是:

1.普通 canvas案例: http://localhost:8080/test.html

2.threejs 案例 http://localhost:8080/test2.html

原理是通过一帧一帧截取图片,最后用 ffmpeg 逐帧将图片合成为视频。

2. 在 cesium中 集成

以定点环绕来举例

首先,初始化 CCapture 实例

js 复制代码
const capturer = new CCapture({
  format: 'ffmpegserver',
  framerate: 60,
  onProgress: () => {},
  extension: '.mp4',
  name: 'cesium'
});

开始环绕

js 复制代码
const lat = 45.2013
const lng = 82.08887889
const position = Cesium.Cartographic.fromDegrees(lng, lat);
// 获取点位所在地形高度
const updatedPosition = await Cesium.sampleTerrainMostDetailed(viewer.terrainProvider, [position]);
const [destination] = updatedPosition;
const height = destination.height;

capturer.start();

const center = Cesium.Cartesian3.fromDegrees(lng, lat, height);
let heading = Cesium.Math.toRadians(40.0);
const pitch = Cesium.Math.toRadians(-45.0);
const range = 2000.0;
let totalRotation = 0
const speed = 1; // 环绕速度,每帧转多少度

capturer.capture(viewer.canvas);

function showVideoLink(url, size) {
  size = size ? ' [size: ' + (size / 1024 / 1024).toFixed(1) + 'meg]' : ' [unknown size]';
  let filename = url;
  const slashNdx = filename.lastIndexOf('/');
  if (slashNdx >= 0) {
    filename = filename.substr(slashNdx + 1);
  }
  // 视频下载链接
  console.log("http://127.0.0.1:8080" +  url)
}

function animate() {
  if (totalRotation >= 360) {
    if (screenRecording) {
      capturer.stop();
      capturer.save(showVideoLink);
    }
    totalRotation = 0;
    return;
  }
  viewer.render();
  capturer.capture(viewer.canvas); // 一定要加这一行,不然视频是纯黑的
  totalRotation += speed;
  heading = Cesium.Math.toRadians(x);
  viewer.camera.lookAt(center, new Cesium.HeadingPitchRange(heading, pitch, range));
  viewer.camera.lookAtTransform(Cesium.Matrix4.IDENTITY);
  requestAnimationFrame(animate);
}

animate();
相关推荐
hunandede42 分钟前
FFmpeg 4.3 音视频-多路H265监控录放C++开发十三.2:avpacket中包含多个 NALU如何解析头部分析
c++·ffmpeg·音视频
声网1 小时前
「人眼视觉不再是视频消费的唯一形式」丨智能编解码和 AI 视频生成专场回顾@RTE2024
人工智能·音视频
Mr.简锋5 小时前
opencv视频读写
人工智能·opencv·音视频
春末的南方城市5 小时前
开源音乐分离器Audio Decomposition:可实现盲源音频分离,无需外部乐器分离库,从头开始制作。将音乐转换为五线谱的程序
人工智能·计算机视觉·aigc·音视频
Hali_Botebie6 小时前
采样率22050,那么CHUNK_SIZE 一次传输的音频数据大小设置多少合适?unity接收后出现卡顿的问题的思路
音视频
风之馨技术录6 小时前
智谱AI清影升级:引领AI视频进入音效新时代
人工智能·音视频
晚点吧7 小时前
视频横屏转竖屏播放-使用人脸识别+目标跟踪实现
人工智能·目标跟踪·音视频
EasyCVR7 小时前
ISUP协议视频平台EasyCVR视频设备轨迹回放平台智慧农业视频远程监控管理方案
服务器·网络·数据库·音视频
cuijiecheng20189 小时前
音视频入门基础:MPEG2-TS专题(3)——TS Header简介
音视频
学编程的小程16 小时前
【安全通信】告别信息泄露:搭建你的开源视频聊天系统briefing
安全·开源·音视频