springAI +openAI 接入阿里云百炼大模型-通义千问

我们已经完成

1、本地模型搭建 DeepSeek-R1 本地部署 - 十分钟搞定

2、spring ai 调本地大模型SpringAI + DeepSeek本地大模型应用开发-聊天机器人

我们发现,本地模型受限于本地服务器配置,调用起来响应很慢体验并不好,那么各大厂出了那么多酷炫的大模型我们为啥不用起来呢,lets do it

本文介绍一下spring ai访问阿里百炼大模型,依旧5分钟搞定

1. 申请apiKey
2. 引pom依赖
3. yml模型配置
4. 使用模型工具

1. 申请apiKey

使用人家的模型得有访问凭证,就跟调任何三方开放平台API一样,直接去
大模型服务平台百炼控制台创建一个就行了

2. 引pom依赖

各大模型默认支持open AI的规范,spring ai 已经帮我们封装好了,引就完事了

复制代码
<dependency>
    <groupId>org.springframework.ai</groupId>
    <artifactId>spring-ai-openai-spring-boot-starter</artifactId>
</dependency>

3. 配置yml模型地址

跟使用本地ollama一样,我们要配置上模型信息,供spring启动时读取配置文件完成自动装配

模型广场里有好多模型,随便玩就行了,模型名称配对了就行

4. 使用模型工具

上面pom依赖添加完,刷新maven依赖,openai模型相关内容就拉到本地仓库了,开用就完事了,老样子:

  • 定义一个聊天客户端bean

  • 将openai模型初始化进去

  • 指定系统角色,这个随意,不指定就是模型默认系统角色

  • chatMemory会话记忆先不用管

    复制代码
      @Bean
      public ChatClient openAiClient(OpenAiChatModel model,ChatMemory chatMemory) {
          return ChatClient
                  .builder(model)
                  .defaultSystem("你是一只功夫熊猫,请以功夫熊猫的身份回答问题")
                  .defaultAdvisors(
                          new MessageChatMemoryAdvisor(chatMemory)
                  )
                  .build();
      }
controller 不变
复制代码
    @Resource
    private ChatClient openAiClient;
    
    @RequestMapping(value = "/chat",produces = "text/html;charset=utf-8")
    public Flux<String>  chat(String prompt,String chatId) {
        return openAiClient.prompt()
                .user(prompt)
                .advisors(advisorSpec -> advisorSpec.param(AbstractChatMemoryAdvisor.CHAT_MEMORY_CONVERSATION_ID_KEY,chatId))
                .stream()
                .content();

    }

开始对话吧,页面源码在上一篇SpringAI + DeepSeek本地大模型应用开发-聊天机器人,啥也不用动,直接运行

还得是大厂模型啊,丝滑~

接下来我们介绍大模型+传统应用的开发,怎么让大模型调本地项目接口呢。。。

相关推荐
VIP_CQCRE12 小时前
在 Visual Studio 里接入 Ace Data Cloud:让 AI 编程助手直接用上 OpenAI 兼容接口
openai·ai编程·开发工具·visual studio·acedatacloud
Ztiddler12 小时前
Codex重新连接解决方法
chatgpt·openai·codex
VIP_CQCRE13 小时前
在 Visual Studio 里接入 AI 编程助手:用 Ace Data Cloud 打通 OpenAI 兼容接口与 LMLocal
openai·ai编程·visual studio·acedatacloud·lmlocal
flash俊杰15 小时前
一套代码接入所有大模型:OpenAI 兼容适配器设计
node.js·openai
ServBay1 天前
ChatGPT Pro 20X 限时回归
gpt·chatgpt·openai
全栈弄潮儿1 天前
AI 生成的代码,哪些地方最容易埋坑?
aigc·openai·ai编程
程序员Better1 天前
我终于遇到一台懂 AI 编程的专业编程显示器!
人工智能·openai·编译器
杨杨杨大侠1 天前
Jev 不是 Agent:TypeSafe System One 如何成为离 LLM 最近的决策层
aigc·openai·ai编程
杨杨杨大侠2 天前
知识库已经有了,Java 程序员还要做什么?Spring AI RAG 实战
java·openai·ai编程
咬代码的兽2 天前
GPT-6 Astra API 上手指南:5 档推理强度怎么选,272K 计费门槛怎么算
openai·gpt-6