springAI +openAI 接入阿里云百炼大模型-通义千问

我们已经完成

1、本地模型搭建 DeepSeek-R1 本地部署 - 十分钟搞定

2、spring ai 调本地大模型SpringAI + DeepSeek本地大模型应用开发-聊天机器人

我们发现,本地模型受限于本地服务器配置,调用起来响应很慢体验并不好,那么各大厂出了那么多酷炫的大模型我们为啥不用起来呢,lets do it

本文介绍一下spring ai访问阿里百炼大模型,依旧5分钟搞定

1. 申请apiKey
2. 引pom依赖
3. yml模型配置
4. 使用模型工具

1. 申请apiKey

使用人家的模型得有访问凭证,就跟调任何三方开放平台API一样,直接去
大模型服务平台百炼控制台创建一个就行了

2. 引pom依赖

各大模型默认支持open AI的规范,spring ai 已经帮我们封装好了,引就完事了

复制代码
<dependency>
    <groupId>org.springframework.ai</groupId>
    <artifactId>spring-ai-openai-spring-boot-starter</artifactId>
</dependency>

3. 配置yml模型地址

跟使用本地ollama一样,我们要配置上模型信息,供spring启动时读取配置文件完成自动装配

模型广场里有好多模型,随便玩就行了,模型名称配对了就行

4. 使用模型工具

上面pom依赖添加完,刷新maven依赖,openai模型相关内容就拉到本地仓库了,开用就完事了,老样子:

  • 定义一个聊天客户端bean

  • 将openai模型初始化进去

  • 指定系统角色,这个随意,不指定就是模型默认系统角色

  • chatMemory会话记忆先不用管

    复制代码
      @Bean
      public ChatClient openAiClient(OpenAiChatModel model,ChatMemory chatMemory) {
          return ChatClient
                  .builder(model)
                  .defaultSystem("你是一只功夫熊猫,请以功夫熊猫的身份回答问题")
                  .defaultAdvisors(
                          new MessageChatMemoryAdvisor(chatMemory)
                  )
                  .build();
      }
controller 不变
复制代码
    @Resource
    private ChatClient openAiClient;
    
    @RequestMapping(value = "/chat",produces = "text/html;charset=utf-8")
    public Flux<String>  chat(String prompt,String chatId) {
        return openAiClient.prompt()
                .user(prompt)
                .advisors(advisorSpec -> advisorSpec.param(AbstractChatMemoryAdvisor.CHAT_MEMORY_CONVERSATION_ID_KEY,chatId))
                .stream()
                .content();

    }

开始对话吧,页面源码在上一篇SpringAI + DeepSeek本地大模型应用开发-聊天机器人,啥也不用动,直接运行

还得是大厂模型啊,丝滑~

接下来我们介绍大模型+传统应用的开发,怎么让大模型调本地项目接口呢。。。

相关推荐
沉默王二16 小时前
国产版Codex?阿里QoderWork有点东西,设计出来的Codex+Claude Code学习网站好看啊(附教程,超简单)
openai·agent·ai编程
机器之心1 天前
AI圈刚开始谈Loop Engineering,两位95后博士已经盯上了人类闭环数据
人工智能·openai
机器之心1 天前
不只DeepSeek,阶跃等开源JetSpec:大模型解码提速近10倍
人工智能·openai
gptAI_plus1 天前
用 React + TypeScript 写一个世界杯淘汰赛对阵树组件
chatgpt·openai
AlbertZein1 天前
别只盯着最强模型了,Agent 场景更该看这类 Flash 档模型
aigc·openai·ai编程
武子康2 天前
调查研究-203 SpaceX IPO 总览:先别急着讲故事,先把发行事实和信息边界立住
人工智能·openai·agent
怕浪猫2 天前
第7章 检索增强生成:打造知识库驱动型Agent
aigc·openai·ai编程
uccs2 天前
流式响应的三次进化:EventSource → ReadableStream → TransformStream
openai·ai编程·claude
宅小年2 天前
Codex Skills 怎么选?我常用的几个推荐给你
openai
机器之心2 天前
近80年后,埃尔德什经典「拉姆齐数下界」,被三位中国学者首次指数级改进
人工智能·openai