Qwen3 ASR 流式转写 Docker 懒人整合包

前言

本文是第二个docker懒人包,依旧是win兼容问题,不得不用docker

这个懒人包有40GB左右,在docker容器里,环境依赖和模型都在,界面为官方的流式demo

同样的,要么在linux上使用(x86),要么在win上使用wsl2和docker桌面版,目前不支持mac arm

懒人包使用

下载并解压缩

加载镜像

docker load -i dockerImages.tar

加载成功后启动

docker-compose up

启动成功后,查看容器id

docker ps

使用powerShell进入容器

docker exec -it 6bb5af3cbb72 /bin/bash

进入容器后,可以使用ls查看当前映射的数据卷文件

ls

然后使用python启动服务

python demo_streaming.py

等待启动成功后,访问localhost:8000

点击开始录音转写即可

Tips

点击此处 网盘下载

docker系列并没有bat一键启动,要使用docker,默认就要会一点相关的命令

以后我可能添加一键启动和初始化命令,目前时间问题,就暂不添加,这样也能避免很多错误,比如端口占用,进程错误当

这个懒人包的参数细节

在demo_streaming.py的代码,我添加了参数,限制kv_catch上下文为8k

max_model_len=8192, 关键修复

如果不限制,我的显存就会爆炸,你可以根据自己的需求去修改Qwen3ASRModel.LLM相关参数,比如max_model_len,或者其他参数,具体请自行参考官方文档或者问AI

相关推荐
Lumbrologist8 小时前
【零基础部署】Docker 部署 CrewAI 多 Agent 编排框架保姆级教程
运维·docker·容器
半旧夜夏13 小时前
【保姆级】微服务组件环境搭建(Docker Compose版)
java·linux·spring cloud·微服务·云原生·容器
宇明一不急15 小时前
k8s HPA storageclass configmap
云原生·容器·kubernetes
ZzzZZzzzZZZzzzz…17 小时前
Docker + K8s集群搭建实战:1 Master+2 Node,含Harbor私有仓库与软路由
docker·云原生·容器·kubernetes·容器编排·集群部署·cri-dockerd
xier_ran18 小时前
【infra之路】模块三:Kubernetes (下) — 阶段一毕业项目:在集群里跑 PyTorch 训练
pytorch·容器·kubernetes
Waay18 小时前
K8s新手实操|emptyDir卷超详细实战(附完整命令+核心理解)
云原生·容器·kubernetes
liux352819 小时前
K8s 核心接口:CNI、CSI、CRI、LB 一篇讲透
云原生·容器·kubernetes
香气袭人知骤暖19 小时前
人大金仓(KingbaseES)Docker 容器自动备份方案
运维·docker·容器
大熊程序猿20 小时前
MarkItDown Docker安装
运维·docker·容器
Hello_worlds20 小时前
Kafka InconsistentClusterIdException 导致容器无限重启,磁盘打满排查与修复
docker·kafka·磁盘·排障