Unity引擎播放HLS自适应码率流媒体视频

大家好,我是阿赵。今天来学习一下Unity引擎怎样播放自适应码率视频的方法。

一、 HLS是什么

HLS是什么,各位可以自己百度一下。简单的概括,HLS是一种自适应码率流媒体传输协议,实现的是分片下载和动态码率切换。

它的原理是把一段视频切分开很多段,然后分段加载,如果遇到网速不好或者其他适应性问题,可以动态的切换到不同的码率去播放。

二、 视频怎样转换HLS

如果需要本地把mp4之类的文件转换成HLS协议播放,需要用到ffmpeg。

可以去官网下载:https://ffmpeg.org/

下载的时候,比如是Windows系统,可以选择下面的Windows,然后选择一个别人build好的exe版本:

当下载完成之后,解压缩,会是这样:

其中bin文件夹里面会有exe可执行文件:

接下来使用ffmpeg来转换视频试试:

比如我拿了一个这样的mp4文件:

然后用cmd控制台找到ffmpeg.exe存放的路径,然后:

bash 复制代码
ffmpeg.exe -i d:/video/orig/Cones.mp4 -codec: copy -start_number 0 -hls_time 10 -hls_list_size 0 -f hls d:/video/hls/Cones.m3u8

这个命令的意思是,我的原始mp4文件放在d:/video/orig/Cones.mp4,然后想要转换后的文件放在d:/video/hls/Cones.m3u8,然后是打算把视频切片成10秒一段。

转换后的文件是这样的,包括一个m3u8文件,然后还有一个或者多个ts文件。

这里只有一个ts文件,是因为我选择的这个mp4文件本身就比较短,不到10秒,所以只能剪出一段。于是我改一下,改成3秒一段:

bash 复制代码
ffmpeg.exe -i d:/video/orig/Cones.mp4 -codec: copy -start_number 0 -hls_time 3 -hls_list_size 0 -f hls d:/video/hls/Cones.m3u8

这时候就剪出3个ts文件了:

打开m3u8文件看看:

里面只是几率了这个视频的一些情况和ts文件的分布。

所以实际播放的视频是在ts文件里面的。

三、 Unity引擎怎样播放HLS

Unity自带的VideoPlayer用于播放mp4视频是非常好用的,我们可以试试它是否能播放HLS的m3u8文件:

很可惜,VideoPlayer是不能播放m3u8文件的:

于是这里要用到一个视频播放插件,叫做AVPro Video:

具体的AVPro用法不是这次的重点,所以请自行下载和查询。

设置一下AVPro的MediaPlayer,MediaSource设置成Path,然后类型改成Absolute PathOrUrl,把刚才不能播放的m3u8文件填入MediaPlayer里面:

可以看到,这次在Unity引擎里面已经顺利的播放出HLS协议的m3u8文件了:

四、 WebGL怎样播放HLS

下面试试把Unity项目导出成WebGL还保持播放视频。先把刚才的项目试试导出WebGL:

由于WebGL的特殊性,所以在MediaPlayer上面要选择一下平台特性,找到WebGL,设置External Library为Hls js。

这里的意思是,需要通过Hls Js文件来播放WebGL下的视频。

这里主要需要hls.min.js

可以去这里下载:https://gitee.com/mirrors/hls-js/

下载下来之后会找到它:

这时候用Unity打包WebGL,打包完是这样的:

然后打开TemplateData文件夹,把hls.min.js文件放到里面:

再用编辑器打开Index.html:

在head标签里面加上一句调用:

bash 复制代码
<script src="TemplateData/hls.min.js"></script>

由于WebGL是不能直接在本地播放的,所以把刚才生成的文件全部放到服务器去,比如本地搭一个阿帕奇服务器,这时候可以通过ip地址去访问刚才的index.html。这个时候,网页打开了,会看到视频并没有播放,而是停留在了第一帧:

这里有个WebGL本身的问题,就是视频和音频不能自己播放,要在用户操作后才能播放。为了测试,我简单的加了个播放按钮,点击之后,视频就正常开始播放了:

相关推荐
REDcker2 天前
WebCodecs VideoDecoder 的 hardwareAcceleration 使用
前端·音视频·实时音视频·直播·webcodecs·videodecoder
gihigo19982 天前
基于TCP协议实现视频采集与通信
网络协议·tcp/ip·音视频
爱搞虚幻的阿恺2 天前
Niagara粒子系统-超炫酷的闪电特效(加餐 纸牌螺旋上升效果)
游戏·游戏引擎
_Li.2 天前
Simulink - 6DOF (Euler Angles)
人工智能·算法·机器学习·游戏引擎·cocos2d
weixin_424294672 天前
Unity 调用Steamworks API 的 SteamUserStats.RequestCurrentStats()报错
unity·游戏引擎·steamwork
HoFunGames2 天前
Unity小地图,Easy Minimap System MT-GPS插件
unity·游戏引擎
山河君2 天前
四麦克风声源定位实战:基于 GCC-PHAT + 最小二乘法实现 DOA
算法·音视频·语音识别·信号处理·最小二乘法·tdoa
音视频牛哥2 天前
Android平台RTMP/RTSP超低延迟直播播放器开发详解——基于SmartMediaKit深度实践
android·人工智能·计算机视觉·音视频·rtmp播放器·安卓rtmp播放器·rtmp直播播放器
qq_416276422 天前
通用音频表征的对比学习
学习·音视频
美狐美颜sdk2 天前
Android全局美颜sdk实现方案详解
人工智能·音视频·美颜sdk·视频美颜sdk·美狐美颜sdk