ChatGLM基于LangChain应用开发实践(一)

一、概述

在使用大模型(LLM)做应用开发时,LangChain是一个主流的开发框架,通过它来构建Agent,根据用户查询访问企业私有数据,调用自定义或者第三方工具库,然后再调用LLM,利用其推理能力以自然语言的方式返回查询结果给用户。本文使用ChatGLM系列的最新开源模型chatglm3-6b,通过LangChain来访问基于Notion存储的私有数据,最后让chatglm3-6b返回查询结果。

二、关于模型的准备

通过访问huggingface.co可以获取开源模型chatglm3-6b,在使用前需要安装依赖库:

pip install protobuf transformers==4.30.2 cpm_kernels torch>=2.0 gradio mdtex2html sentencepiece accelerate

可以利用transformers库直接下载模型:

接下来测试一下模型加载后是否能被正常调用:

打印结果如下:

继续输入问题,这次对话调用加入了参数history:

打印结果如下:

复制代码
晚上睡不着时,你可以尝试以下几种方法:

1. 保持冷静:尽量放松,不要焦虑或担心失眠问题。

2. 改变环境:确保你的卧室环境安静、舒适、黑暗。关闭电子设备,降低光线,使用舒适的床垫和枕头。

3. 规律作息:每天尽量在相同的时间入睡和起床,以调整你的生物钟。

4. 放松技巧:尝试一些放松技巧,如深呼吸、冥想、渐进性肌肉松弛等。

5. 避免刺激性活动:晚上避免喝咖啡、茶、可乐等含咖啡因的饮料,避免过于油腻的食物,这些都可能导致失眠。

6. 睡前活动:睡前适度活动,如散步、瑜伽等,有助于放松身心。

7. 睡前限制使用电子设备:过度使用电子设备会影响睡眠质量,建议睡前一小时不再使用电子设备。

8. 睡前故事或阅读:睡前听一些轻柔的音乐或者读一些轻松的书籍,有助于入睡。

如果以上方法不能解决你的失眠问题,建议咨询专业医生或睡眠专家,以获得更好的建议和治疗。

以上测试表明模型调用成功。

三、关于私有数据的准备

为了方便演示,这里使用了从notion网站(https://www.notion.so)导出的一些样例数据来作为私有数据,供大模型框架LangChain来访问。下面展示的是样例数据片段:

如果基于传统项目开发来访问notion的数据,随着数据的增多,这会让访问变得困难,并且效率低下,从另一方面来说,现在的LLM通常是基于公开的通用数据集来进行训练的,如果企业用户提交的查询是跟私有数据相关的,那么直接与LLM交互往往得不到期望的结果,譬如下面提交一个问题让模型回答(用户问题跟私有数据相关):

问题:what's the probation period?

以下是模型给出的回答:

接下来会根据以上提到的notion样例数据,通过使用LangChain构建Agent来访问这些数据,从而让LLM的回答更有针对性,更符合用户期望的查询结果。

相关推荐
fenglllle2 分钟前
使用AI能力编译ARM版本的截图软件
arm开发·人工智能
OpenVINO 中文社区7 分钟前
OpenVINO™正式进入 llama.cpp:GGUF 模型现已支持 Intel CPU、GPU 与 NPU
人工智能·openvino·英特尔
ZKNOW甄知科技12 分钟前
数智同行:甄知科技2026年Q1季度回顾
运维·服务器·人工智能·科技·程序人生·安全·自动化
呆呆敲代码的小Y13 分钟前
【Unity工具篇】| 游戏完整资源热更新流程,YooAsset官方示例项目
人工智能·游戏·unity·游戏引擎·热更新·yooasset·免费游戏
jikemaoshiyanshi13 分钟前
B2B企业GEO服务商哪家好?深度解析径硕科技(JINGdigital)及其JINGEO产品为何是首选
大数据·运维·人工智能·科技
Lab_AI14 分钟前
浩天药业携手创腾科技,开启研发数字化新篇章!电子实验记录本(ELN)落地浩天药业
人工智能
supericeice15 分钟前
大模型建筑隐患管理方案怎么做?创邻科技用知识图谱、图数据库和企业AI大脑打通隐患问答、整改与推荐
人工智能·科技·知识图谱
蕤葳-19 分钟前
非编程背景学习AI的方法
人工智能
北京耐用通信22 分钟前
不换设备、不重写程序:耐达讯自动化网关如何实现CC-Link IE转Modbus TCP的高效互通?
人工智能·科技·物联网·网络协议·自动化·信息与通信
计算机毕业设计指导23 分钟前
基于机器学习和深度学习的恶意WebURL检测系统实战详解
人工智能·深度学习·机器学习·网络安全