阿里全模态模型Qwen2.5-Omni现已开源,其7B尺寸的版本实现了全球顶尖的性能表现

今日,通义千问Qwen2.5-Omni-7B正式开源,作为通义系列首个端到端全模态大模型,它能够同时处理文本、图像、音频、视频等多类型输入,并实时生成文本与自然语音合成输出。在权威多模态融合任务OmniBench等测评中,Qwen2.5-Omni刷新业界纪录,在各个维度远超Google的Gemini - 1.5 - Pro等同类模型。

通义千问

Qwen2.5-Omni以接近人类的多感官方式"立体"认知世界并与之实时交互,还能通过音视频识别情绪,在复杂任务中做出更智能、自然的反馈与决策。目前,开发者和企业可免费下载商用该模型,手机等终端智能硬件也能轻松部署运行。

Qwen2.5-Omni采用通义团队全新首创的Thinker - Talker双核架构、Position Embedding(位置嵌入)融合音视频技术以及位置编码算法TMRoPE(Time - aligned Multimodal RoPE)。Thinker - Talker双核架构赋予Qwen2.5-Omni人类的"大脑"和"发声器",形成端到端的统一模型架构,实现实时语义理解与语音生成的高效协同。具体来说,Qwen2.5-Omni支持多种输入形式,可同时感知所有模态输入,并以流式处理方式实时生成文本与自然语音响应。

得益于这些突破性创新技术,Qwen2.5-Omni在一系列同等规模的单模态模型权威基准测试中展现出全球最强的全模态优异性能,在语音理解、图片理解、视频理解、语音生成等领域的测评分数均领先于专门的Audio或VL模型,其语音生成测评分数(4.51)达到与人类持平的能力。

相较于动辄数千亿参数的闭源大模型,Qwen2.5-Omni以7B的小尺寸使全模态大模型在产业上的广泛应用成为可能,即便在手机上也能轻松部署和应用。当前,Qwen2.5-Omni已在魔搭社区和Hugging Face同步开源,用户也可在Qwen Chat上直接体验。

自2023年起,通义团队陆续开发了覆盖从0.5B到110B等参数的200多款"全尺寸"大模型,涵盖文本生成、视觉理解/生成、语音理解/生成、文生图及视频等"全模态",真正让普通用户和企业都能用得上、用得起AI大模型。截至目前,海内外AI开源社区中千问Qwen的衍生模型数量已突破10万,是公认的全球第一开源模型。

文章来自完美岛ai:阿里全模态模型Qwen2.5-Omni现已开源,其7B尺寸的版本实现了全球顶尖的性能表现 - 完美岛AI网址导航 - AI导航,AI工具集,AI网址导航,AI官网地址,AI工具导航,AI设计绘图导航,AI学习,英语AI学习

Qwen Chat免费体验:
chat.qwenlm.ai

百炼平台模型调用:
help.aliyun.com/zh/model-st...

Demo体验:
modelscope.cn/studios/Qwe...

开源地址:
huggingface.co/Qwen/Qwen2....
modelscope.cn/models/Qwen...
github.com/QwenLM/Qwen...

相关推荐
甲维斯13 分钟前
普通人慎入!Fable5原创游戏“死线求生”第一版!
人工智能·ai编程·游戏开发
码哥字节1 小时前
OpenSpec+Superpowers焊死后,AI编码工作流终于自洽了
ai编程·openspec·superpowers·spec-superflow
代码不接地2 小时前
【时间序列预测】0.时间序列任务知识地图
python·ai编程
海兰2 小时前
【AI编程思考:第六篇】学习记忆与 Agent 状态:让 AI 真正“记得”你
人工智能·学习·ai编程
雨辰AI2 小时前
【零基础实战】大模型入门面试 100 问:基础概念 + 环境实操(一问一答版,直接背诵)
人工智能·ai·面试·职场和发展·ai编程
anyup3 小时前
uView Pro 正式支持 MCP 协议!让 AI 秒懂你的组件库
前端·uni-app·ai编程
先吃饱再说3 小时前
RAG 实战:给大模型装上“开卷考试”的外挂
llm·ai编程
慕嵩云3 小时前
当我们讨论 Harness 的时候,我们在讨论什么?
ai编程
乘风gg3 小时前
代码都已经让 AI 写了,为什么有些人却更慌了?
前端·ai编程·claude
ZJPRENO3 小时前
Claude 必备技能 Superpowers
ai编程