(二)langchain 调用本地seepseek大模型

直接上 代码

python 复制代码
# 01-hello-ollama.py
from langchain.chat_models import init_chat_model
model=init_chat_model(
    model="ollama:deepseek-r1:1.5b",
    base_url="http://localhost:11434",
    temperature=0.1,
    timeout=30,
    max_tokens=2000
)

for chunk in model.stream("你好你谁"):
    print(chunk.content,end='',flush=True)

(langchain1.0) D:\IDO\mylangchain1.0>python 01-hello-ollama.py

遇到问题:

"C:\Users\Administrator\.conda\envs\langchain1.0\Lib\site-packages\ollama\_client.py", line 179, in inner raise ResponseError(e.response.text, e.response.status_code) from None ollama._types.ResponseError: (status code: 502) (langchain1.0) D:\IDO\mylangchain1.0>

报错502给我苦恼的要死,各种改ollama段端口。

解决问题思路。

1.确定ollama run deepseek-r1:1.5b 能跑起来。如果跑不起来是不是模型没有下载

2.ollama serve 重启ollama serve看到这个界面就代码ollama 服务器启动成功

3.然后重新开启一个prompt窗口 进入工程目录 激活运行环境 运行python 01-hello-ollama.py

(我的还是报502)

我又是改端口,又是改防火墙,最后发现是vpn的事情。我把vpn关了,重启服务就好了,要命了啊!!!!

相关推荐
半个落月4 小时前
LangChain.js Agent Memory 实战(下):用 Milvus 构建可检索的长期记忆
javascript·langchain
半个落月4 小时前
LangChain.js Agent Memory 实战(上):从内存对话、文件持久化到截断与摘要
javascript·langchain
梦在远山后8 小时前
Electron 与 FastAPI 如何完成流式 Agent 对话
python·langchain·agent
猿人谷11 小时前
Jev:当 AI 不再生成 Token,而是直接做决策
后端·langchain·aigc
逆风飞翔的小叔11 小时前
【AI智能体】Langchain 主流大模型调用与对话API使用详解
langchain·langchain 对话api·langchain 对话·langchain 对话使用·langchain 对话详解·langchain api使用
王国强200914 小时前
如何通过 Deep Agents、LangChain 与 LangGraph 构建生产级智能体:从 Deep Agents Code 源码看 Agent 工程实
langchain
warrior14 小时前
垂直领域问答助手开发
langchain
染指111015 小时前
120.Agent-LangChain核心组件-中间件-摘要中间件(SummarizationMiddleware)
人工智能·langchain·agent·agents
用户31346721435416 小时前
Agent 开发学习笔记(七):RAG: 从建库到检索到生成
langchain·agent
啊吧怪不啊吧16 小时前
LangChain之模型调用
python·langchain