UnityWebGL获取话筒实时数据

看了木子李大佬的数字人https://digital.lkz.fit/之后,我也想搞一个,于是开始研究起来,先从WebGL录音开始,一共试了三个插件,个个都有问题......

1、UnityWebGLMicrophone

用起来没啥问题,但是只能录音,不能获取实时数据,改成了Package包,修改了打包后处理,折腾现场在
https://gitee.com/awnuxcvbn/uMicrophone.git 和 https://gitee.com/awnuxcvbn/TestuMicrophone.git

2、Microphone Pro - WebGL Mobiles Desktop 4.0.1.unitypackage 和1一样能用,但不能获取实时数据

3、uMicrophoneWebGL

这个可以实时获取话筒数据,但是录音播放貌似会变调,fork了一下一顿修改,改成了Package包,把WebGL之外的录音修改了一下,然后修改了sampleRate为16000,方便后面进行的流式语音识别,本人对JavaScript不熟悉,一顿折腾还扒拉了木子李大佬的网页里的JavaScript代码看了看(没看懂......苦笑),折腾现场在这里
https://gitee.com/awnuxcvbn/uMicrophoneWebGL.git

最后放上Unity WebGL流式语音识别效果图,流式语音识别下一篇再水......

相关推荐
zdr尽职尽责1 天前
UnityCli 兼容2022版本
ui·unity·ai·c#·游戏引擎
ellis19703 天前
Claude Code[二] 上下文相关的机制
unity·ai编程
zdr尽职尽责4 天前
Unity 3C 动画系统:从「蜘蛛网」到可维护的动画架构
unity·架构·游戏引擎
国家一级摸鱼选手4 天前
[Unity]几何碰撞检测:SAT 分离轴定理详解(从数学原理到 C# 实现)
unity·c#·游戏引擎·分离轴定理(sat)·多边形相交
暴走约伯6 天前
【VFX工具链源码拆解 09】终极工业化闭环:基于 ID 规则驱动的全自动场景建档、骨骼挂载与男转女场景迁移
unity·c#·游戏引擎·材质
寂寞的船7 天前
【Unity知识速递】第13期 Unity 内存泄漏排查实战:从 Memory Profiler 到 Lua 引用泄漏的生产级全链路诊断
unity·junit·c#·游戏引擎·lua
寂寞的船8 天前
【Unity Bug挑战】第12期 Awaitable 二次 await 死锁之谜 —— 为什么同一个异步操作等两次就卡死?
unity·c#·游戏引擎·bug
探求虚无9 天前
用 AI 在 Unity 里做一款 RTS:最难的不是生成代码,而是证明它真的能玩
人工智能·unity·游戏引擎
17岁的勇气10 天前
Unity Shader unity文档学习笔记(二十二):shader变体
笔记·学习·unity
寂寞的船11 天前
【Unity知识速递】第10期 Unity GC 零分配实战:从 UnityEngine.Pool 到手动 GC 控制的全链路优化
jvm·unity·c#·游戏引擎·lucene