【RTX Pro 4500】Qwen3.8 27B NVFP4在LM Studio挂载多模态模型

【RTX Pro 4500】Qwen3.8 27B NVFP4在LM Studio挂载多模态模型

前言

之前已经部署了模型:

https://lizhiyong.blog.csdn.net/article/details/163834176

虽然模型本身是多模态的,但是:

此时并不具备多模态功能!!!

强行使用会失败:

虽然GPU会有负载,但是结果表明不能识别:

所以需要按照作者的提示,去加载多模态模型:

地址在抱抱脸:

url 复制代码
https://huggingface.co/esatapedico/Qwen3.8-27B-NVFP4-MTP-GGUF/tree/main

加载多模态模型

放置到模型的相同路径下:

此时就会出现神奇的事情:

这个模型此刻具有了多模态功能。

验证多模态功能

加载了多模态的模型后,此时显存占用会变多,到达26.6GB。

还是甩个相同的视频:

可惜在LM Studio里还是不具备视频识别能力:

验证图片识别能力

但是具备了图片识别能力:

识别准确率还不错:

java 复制代码
未找到相关引用。这张图片呈现的是一个幽默拟人化的海滩场景:一只戴墨镜的豹子惬意地躺在沙滩的绿色毛巾上,毛巾上印着中文"虎鲸不是鱼"。它一手拿着报纸阅读,嘴里叼着吸管,正在喝一杯装有冰块、橙子片、西瓜块和薄荷叶的红色饮料。背景是阳光下的海滨,有椰子树、蓝色海水、遮阳伞以及若干模糊的游客,整体氛围轻松搞笑,像是在度假休闲。

这句未找到相关引用明显多余了。。。不过内容是描述出来了。

转载请注明出处:

https://lizhiyong.blog.csdn.net/article/details/163834242

相关推荐
遇码10 小时前
流式调用中途断连别直接报错:瞬态故障识别、退避重试与中文根因诊断的搭建方法
大数据·人工智能·ai·rust·数据分析·大模型·agent
德林恩宝14 小时前
On-Policy Distillation(OPD)学习文档
人工智能·学习·机器学习·大模型·llm·大模型微调
console.log('npc')15 小时前
第 1 章 项目概述与环境搭建
前端·人工智能·大模型
山顶夕景16 小时前
【Jev】多模态Jev决策模型
大模型·多模态·jev·决策模型
学IT的周星星18 小时前
记忆系统:让 Agent 记住你是谁、上次聊到哪
运维·服务器·人工智能·windows·大模型·llm·agent
余槐i18 小时前
transformers 升级后加载旧权重报错:三处不兼容如何逐一验证
python·大模型·transformers·模型量化·模型推理
nap-joker1 天前
脑衰老的多模态特征:从描述性分析到基于机器学习的整合
人工智能·机器学习·多模态
遇码1 天前
不用转场引擎做幻灯片转场:相机滑动、黑场淡入与真全屏的完整做法
人工智能·数码相机·ai·rust·大模型·agent
救救孩子把1 天前
AI面试八股文-12_11-多模态大模型面试题
人工智能·面试·职场和发展·多模态·clip·rag·llave
艾莉丝努力练剑1 天前
【AI大模型接入SDK】ChatServer接口设计规范
网络·c++·人工智能·学习·大模型·设计规范