PAI Model Gallery 支持云上一键部署 Qwen3 全尺寸模型

模型简介

Qwen3 是 Qwen 系列最新一代的大语言模型,提供了一系列密集(Dense)和混合专家(MOE)模型。基于广泛的训练,Qwen3 在推理、指令跟随、Agent 能力和多语言支持方面取得了突破性的进展,具有以下关键特性:

  • 独特支持在思考模式 (用于复杂逻辑推理、数学和编码)和 非思考模式(用于高效通用对话)之间无缝切换,确保在各种场景下的最佳性能。
  • 显著增强的推理能力,在数学、代码生成和常识逻辑推理方面超越了之前的 QwQ (在思考模式下)和 Qwen2.5 指令模型(在非思考模式下)。
  • 卓越的人类偏好对齐,在创意写作、角色扮演、多轮对话和指令跟随方面表现出色,提供更自然、更吸引人和更具沉浸感的对话体验。
  • 擅长 Agent 能力,可以在思考和非思考模式下精确集成外部工具,在复杂的基于代理的任务中在开源模型中表现领先。
  • 支持 100 多种语言和方言,具有强大的多语言理解、推理、指令跟随和生成能力。

Model Gallery 是阿里云人工智能平台 PAI 的产品组件,它集成了国内外 AI 开源社区中优质的预训练模型,涵盖了 LLM、AIGC、CV、NLP 等各个领域。通过 PAI 对这些模型的适配,用户可以以零代码方式实现从训练到部署再到推理的全过程,简化了模型的开发流程,为开发者和企业用户带来了更快、更高效、更便捷的 AI 开发和应用体验。

PAI Model Gallery 访问地址:pai.console.aliyun.com/#/quick-sta...

阿里云 PAI Model Gallery 已同步接入Qwen3本次开源的所有模型,提供企业级部署方案。

✅ 零代码一键部署

✅ 自动适配云资源

✅ 部署后开箱即用API

✅ 全流程运维托管

✅ 企业级安全 数据不出域

一键部署 Qwen3 方案

⬇️ 立即体验 ⬇️

下面以 Qwen3-8B 模型部署为例(推理成本较低,可用于快速验证)。

  1. 在 Model Gallery 模型广场找到 Qwen3-8B 系列模型,或通过链接直达该模型:pai.console.aliyun.com/?regionId=c...
  1. 在模型详情页右上角点击「部署」,已支持SGLang、vLLM高性能部署框架。在选择计算资源后,即可一键完成模型的云上部署。
  1. 部署成功后,在服务页面可以点击"查看调用信息"获取调用的 Endpoint 和 Token,想了解服务调用方式可以点击预训练模型链接,返回模型介绍页查看调用方式说明。
  1. 使用推理服务。您可以在 PAI-EAS 推理服务平台上在线调试已部署好的 Qwen3 模型服务,从图中可以看出模型回复具备较好的思维链能力。

下表提供了部署所需的最低配置,以及使用不同机型部署时在不同推理框架上支持的最大 Token 数。

模型 支持的最大 Token 数(输入+输出) 最低配置
SGLang 加速部署 vLLM 加速部署
Qwen3-235B-A22B 32768(加 RoPE 缩放:131072) 32768(加 RoPE 缩放:131072) 8 卡 GPU H / GU120 (8 * 96 GB 显存)
Qwen3-235B-A22B-FP8 32768(加 RoPE 缩放:131072) 32768(加 RoPE 缩放:131072) 4 卡 GPU H / GU120 (4 * 96 GB 显存)
Qwen3-30B-A3B Qwen3-30B-A3B-Base Qwen3-32B 32768(加 RoPE 缩放:131072) 32768(加 RoPE 缩放:131072) 1 卡 GPU H / GU120 (96 GB 显存)
Qwen3-14B Qwen3-14B-Base 32768(加 RoPE 缩放:131072) 32768(加 RoPE 缩放:131072) 1 卡 GPU L / GU60 (48 GB 显存)
Qwen3-8B Qwen3-4B Qwen3-1.7B Qwen3-0.6B Qwen3-8B-Base Qwen3-4B-Base Qwen3-1.7B-Base Qwen3-0.6B-Base 32768(加 RoPE 缩放:131072) 32768(加 RoPE 缩放:131072) 1 卡 A10 / GU30 (24 GB 显存)

更多模型支持

除 Qwen3 全系列模型外,PAI-Model Gallery 持续提供开源社区热门模型快速部署、训练、评测实践。

  • DeepSeek-R1 推理性能优化版

推理性能提升,相同时延约束下,吞吐能提升492%;相同吞吐情况下, 首token时延直降86%,token间时延直降69%。

DeepSeek云端加速版发布,具备超高推理性能

  • DeepSeek-R1 满血版模型

PAI Model Gallery 支持云上一键部署 DeepSeek-V3、DeepSeek-R1 系列模型

  • QwQ 32B

云上一键部署通义千问 QwQ-32B 模型,阿里云 PAI 最佳实践

联系我们

欢迎各位小伙伴持续关注使用 PAI-Model Gallery,平台会不断上线 SOTA 模型,如果您有任何模型需求,也可以联系我们。您可通过钉钉扫描下方二维码(或搜索钉钉群号79680024618),加入PAI-Model Gallery用户交流群。

相关推荐
软件测试小仙女3 分钟前
AI测试工具Testim——告别自动化测试维护难题
自动化测试·软件测试·人工智能·测试工具·单元测试·集成测试·压力测试
xieyan081125 分钟前
MCP之一_MCP协议解析
人工智能
小华同学ai31 分钟前
2.1k star! 抓紧冲,DeepChat:连接AI与个人世界的智能助手的开源项目
人工智能·ai·开源·github·工具
界面开发小八哥41 分钟前
智能Python开发工具PyCharm v2025.1——AI层级功能重磅升级
ide·人工智能·python·pycharm·开发工具
汀丶人工智能1 小时前
Qwen3强势来袭:推理力爆表、语言超百种、智能体协作领先,引领AI开源大模型
人工智能
Blossom.1181 小时前
可解释人工智能(XAI):让机器决策透明化
人工智能·驱动开发·深度学习·目标检测·机器学习·aigc·硬件架构
go4it1 小时前
聊聊Spring AI Alibaba的PlantUMLGenerator
llm
极客智谷1 小时前
Spring AI应用系列——基于Alibaba DashScope的聊天记忆功能实现
人工智能·后端
极客智谷1 小时前
Spring AI应用系列——基于Alibaba DashScope实现功能调用的聊天应用
人工智能·后端
-一杯为品-1 小时前
【深度学习】#10 注意力机制
人工智能·深度学习