大语言模型典型本地搭建及其应用

1 Ollama奠基及其应用

1.1 命令终端交互操控

1.2 可视窗口交互操控

1.3 自定义模型应用

1.4 U盘载体运行

2 OpenWebUI页面交互应用

3 LMStudio视窗交互应用

4 ChatBox视窗交互应用

5 CherryStudio视窗交互应用

5.1 基本对话文本应用

5.2 本地知识库构建

5.3 本地代码库构建

5.4 本地服务MCP调用

5.4.1 文件操控

5.4.2 数据库访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地SQLite数据库的灵活操控访问,所有功能可以在浏览器窗口测试。源码案例和指导文档很多,本想可以一蹴而就,可始终无果。于是,采用FastMcp库本地编码搭建简单MCP服务,服务器事件推送SSE,几经调试和完善,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.3 StreamableHTTP访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地流媒(streamableHTTP)音频服务器设计与CherryStudio部署应用。起初选用简易的cherrypy库做起MCP服务器,浏览器测试没有问题,CherryStudio环境部署但不能应用。后改用FastMCP库,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.4 高德/百度地图访问

相关推荐
fthux2 小时前
装闭 RenoPit 源码解析(09):AnalysisEngine装修闭坑分析主流程
人工智能·ai·开源·github·open source·renopit
敏编程2 小时前
开源项目 NextBand:探索融合健康传感、语音交互与 AI Agent 的下一代可穿戴设备
人工智能
ovO2 小时前
我按下“发送”之后:DeepSeek Harness 如何把一次请求变成 1,177 个增量片段
人工智能·开源·deepseek
昨日之日20062 小时前
LTX-2.5:更清晰、更可控、同步音画、多镜头连贯的AI视频神器
人工智能·音视频
九硕智慧建筑一体化厂家2 小时前
数字化管控落地,直流照明构筑安全照明体系
运维·人工智能·笔记·安全·智慧城市
江厌012 小时前
本地部署DeepSeek显卡怎么选?我把显存计算公式和实测记录写下来了
人工智能·百度·联想工作站·代理商推荐·渠道对比·工作站
小席是个热心肠3 小时前
AI相关的自我学习
java·人工智能·学习
FII工业富联科技服务3 小时前
工业AI自治的演进趋势:从内容生成到Agent驱动的工厂运营范式转变
人工智能
云和数据.ChenGuang3 小时前
fastapi的参数剖析
人工智能·深度学习·机器学习·语言模型·状态模式·fastapi
日常筹谋记3 小时前
技术研究:数据中心HVDC系统直流保护配合与ABB电气产品参数解析
人工智能·创业创新·业界资讯