大语言模型典型本地搭建及其应用

1 Ollama奠基及其应用

1.1 命令终端交互操控

1.2 可视窗口交互操控

1.3 自定义模型应用

1.4 U盘载体运行

2 OpenWebUI页面交互应用

3 LMStudio视窗交互应用

4 ChatBox视窗交互应用

5 CherryStudio视窗交互应用

5.1 基本对话文本应用

5.2 本地知识库构建

5.3 本地代码库构建

5.4 本地服务MCP调用

5.4.1 文件操控

5.4.2 数据库访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地SQLite数据库的灵活操控访问,所有功能可以在浏览器窗口测试。源码案例和指导文档很多,本想可以一蹴而就,可始终无果。于是,采用FastMcp库本地编码搭建简单MCP服务,服务器事件推送SSE,几经调试和完善,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.3 StreamableHTTP访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地流媒(streamableHTTP)音频服务器设计与CherryStudio部署应用。起初选用简易的cherrypy库做起MCP服务器,浏览器测试没有问题,CherryStudio环境部署但不能应用。后改用FastMCP库,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.4 高德/百度地图访问

相关推荐
乾元4 分钟前
拒绝服务的进化:AI 调度下的分布式协同攻击策略
人工智能·分布式
困死,根本不会5 分钟前
OpenCV摄像头实时处理:从单特征到联合识别(形状识别 + 颜色识别 + 形状颜色联合识别)
人工智能·opencv·计算机视觉
工具人呵呵6 分钟前
[嵌入式AI从0开始到入土]22_基于昇腾310P RC模式的ACT模型部署实践
人工智能
yj_sharing7 分钟前
PyTorch深度学习实战:从模型构建到训练技巧
人工智能·pytorch·深度学习
安全二次方security²8 分钟前
CUDA C++编程指南(7.31&32&33&34)——C++语言扩展之性能分析计数器函数和断言、陷阱、断点函数
c++·人工智能·nvidia·cuda·断点·断言·性能分析计数器函数
bksheng9 分钟前
【Dify】安装与部署
人工智能
狸奴算君10 分钟前
告别数据泄露:三步构建企业级AI的隐私保护盾
人工智能
Christo317 分钟前
TKDE-2026《Efficient Co-Clustering via Bipartite Graph Factorization》
人工智能·算法·机器学习·数据挖掘
jackylzh17 分钟前
PyTorch 2.x 中 `torch.load` 的 `FutureWarning` 与 `weights_only=False` 参数分析
人工智能·pytorch·python
叶庭云24 分钟前
AI Agent KernelCAT:深耕算子开发和模型迁移的 “计算加速专家”
人工智能·运筹优化·算子·ai agent·kernelcat·模型迁移适配·生态壁垒