openi启智社区提供大模型在线体验功能

openi启智社区提供大模型在线体验功能,可以根据自己的任务场景选择合适的模型和计算资源,创建模型在线体验任务,从而在线检验模型的反应效果。

网址:OpenI - 启智AI开源社区提供普惠算力!

有很多模型可以选 每个账户可以同时创建3个模型体验任务。

比如这次选择Meta-Llama-3.1-8B-Instruct

选NPU,任务名字:skywalk_llama31_8b

启动:

|----------------------------------------------------------------------------------------------------------------------------|----------------------------|---------|---------------------|----------|-----|-------|-----------|---|
| skywalk_llama31_8b | Meta-Llama-3.1-8B-Instruct | RUNNING | 2025-12-12 22:09:02 | 00:04:57 | NPU | 鹏城云脑Ⅱ | ASCEND910 | |

|---|---|---|---|---|---|---|---|----------|
| | | | | | | | | 在线体验停止删除 |

可以说效果还是挺不错的。

唯一的缺点就是不能用api来调用,而星河社区的模型部署是可以api调用的。

当然星河社区的主要以文心模型为主。

附:openi还可以使用调试模式来推理大模型

比如:OpenI - 启智AI开源社区提供普惠算力!

使用方式

2、在代码中通过c2net库方式获取模型。
复制代码
from c2net.context import prepare

#初始化导入数据集和预训练模型到容器内
c2net_context = prepare()

#获取预训练模型路径
deepseek_r1_0528_qwen3_8b_path = c2net_context.pretrain_model_path+"/"+"DeepSeek-R1-0528-Qwen3-8B"
相关推荐
lili-felicity4 小时前
CANN异步推理实战:从Stream管理到流水线优化
大数据·人工智能
做人不要太理性4 小时前
CANN Runtime 运行时组件深度解析:任务下沉执行、异构内存规划与全栈维测诊断机制
人工智能·神经网络·魔珐星云
不爱学英文的码字机器4 小时前
破壁者:CANN ops-nn 仓库与昇腾 AI 算子优化的工程哲学
人工智能
晚霞的不甘4 小时前
CANN 编译器深度解析:TBE 自定义算子开发实战
人工智能·架构·开源·音视频
愚公搬代码4 小时前
【愚公系列】《AI短视频创作一本通》016-AI短视频的生成(AI短视频运镜方法)
人工智能·音视频
哈__4 小时前
CANN内存管理与资源优化
人工智能·pytorch
极新4 小时前
智启新篇,智创未来,“2026智造新IP:AI驱动品牌增长新周期”峰会暨北京电子商务协会第五届第三次会员代表大会成功举办
人工智能·网络协议·tcp/ip
island13144 小时前
CANN GE(图引擎)深度解析:计算图优化管线、内存静态规划与异构任务的 Stream 调度机制
开发语言·人工智能·深度学习·神经网络
艾莉丝努力练剑4 小时前
深度学习视觉任务:如何基于ops-cv定制图像预处理流程
人工智能·深度学习
禁默4 小时前
大模型推理的“氮气加速系统”:全景解读 Ascend Transformer Boost (ATB)
人工智能·深度学习·transformer·cann