(二)langchain 调用本地seepseek大模型

直接上 代码

python 复制代码
# 01-hello-ollama.py
from langchain.chat_models import init_chat_model
model=init_chat_model(
    model="ollama:deepseek-r1:1.5b",
    base_url="http://localhost:11434",
    temperature=0.1,
    timeout=30,
    max_tokens=2000
)

for chunk in model.stream("你好你谁"):
    print(chunk.content,end='',flush=True)

(langchain1.0) D:\IDO\mylangchain1.0>python 01-hello-ollama.py

遇到问题:

"C:\Users\Administrator\.conda\envs\langchain1.0\Lib\site-packages\ollama\_client.py", line 179, in inner raise ResponseError(e.response.text, e.response.status_code) from None ollama._types.ResponseError: (status code: 502) (langchain1.0) D:\IDO\mylangchain1.0>

报错502给我苦恼的要死,各种改ollama段端口。

解决问题思路。

1.确定ollama run deepseek-r1:1.5b 能跑起来。如果跑不起来是不是模型没有下载

2.ollama serve 重启ollama serve看到这个界面就代码ollama 服务器启动成功

3.然后重新开启一个prompt窗口 进入工程目录 激活运行环境 运行python 01-hello-ollama.py

(我的还是报502)

我又是改端口,又是改防火墙,最后发现是vpn的事情。我把vpn关了,重启服务就好了,要命了啊!!!!

相关推荐
Loo国昌2 小时前
【LangChain1.0】第九阶段:文档处理工程 (LlamaIndex)
人工智能·后端·python·算法·langchain
Java后端的Ai之路8 小时前
【AI大模型开发】-创建RAG问答实战(LangChain+DeepSeek+Faiss)
人工智能·langchain·faiss·deepseek
doll ~CJ10 小时前
Large Language Model(LLM)应用开发学习实践(二)
langchain·llm·ai应用开发·memorystrategy
阿里云云原生10 小时前
快速上手:LangChain + AgentRun 浏览器沙箱极简集成指南
阿里云·云原生·langchain·函数计算·agentrun
zuozewei12 小时前
零基础 | 使用LangChain框架实现ReAct Agent
前端·react.js·langchain
weixin_4624462314 小时前
使用 LangChain + Ollama + Neo4j 构建中文知识图谱完整教程(含 Docker 部署)
langchain·知识图谱·neo4j
hkNaruto1 天前
【AI】AI学习笔记:LangGraph 与 LangChain的关系以及系统性学习路线选择
笔记·学习·langchain
Hcoco_me1 天前
大模型面试题90:half2,float4这种优化 与 pack优化的底层原理是什么?
人工智能·算法·机器学习·langchain·vllm
小付爱coding1 天前
跟着官网学LangChain【第01章:模型(Models)】
服务器·网络·langchain