大语言模型典型本地搭建及其应用

1 Ollama奠基及其应用

1.1 命令终端交互操控

1.2 可视窗口交互操控

1.3 自定义模型应用

1.4 U盘载体运行

2 OpenWebUI页面交互应用

3 LMStudio视窗交互应用

4 ChatBox视窗交互应用

5 CherryStudio视窗交互应用

5.1 基本对话文本应用

5.2 本地知识库构建

5.3 本地代码库构建

5.4 本地服务MCP调用

5.4.1 文件操控

5.4.2 数据库访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地SQLite数据库的灵活操控访问,所有功能可以在浏览器窗口测试。源码案例和指导文档很多,本想可以一蹴而就,可始终无果。于是,采用FastMcp库本地编码搭建简单MCP服务,服务器事件推送SSE,几经调试和完善,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.3 StreamableHTTP访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地流媒(streamableHTTP)音频服务器设计与CherryStudio部署应用。起初选用简易的cherrypy库做起MCP服务器,浏览器测试没有问题,CherryStudio环境部署但不能应用。后改用FastMCP库,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.4 高德/百度地图访问

相关推荐
大龄程序员狗哥5 小时前
第47篇:使用Speech-to-Text API快速构建语音应用(操作教程)
人工智能
KKKlucifer5 小时前
数据安全合规自动化:策略落地、审计追溯与风险闭环技术解析
人工智能·安全
RWKV元始智能5 小时前
RWKV超并发项目教程,RWKV-LM训练提速40%
人工智能·rnn·深度学习·自然语言处理·开源
dyj0955 小时前
Dify - (一)、本地部署Dify+聊天助手/Agent
人工智能·docker·容器
墨染天姬5 小时前
【AI】Hermes的GEPA算法
人工智能·算法
小超同学你好5 小时前
OpenClaw 深度解析系列 · 第8篇:Learning & Adaptation(学习与自适应)
人工智能·语言模型·chatgpt
紫微AI6 小时前
前端文本测量成了卡死一切创新的最后瓶颈,pretext实现突破了
前端·人工智能·typescript
码途漫谈6 小时前
Easy-Vibe开发篇阅读笔记(四)——前端开发之结合 Agent Skills 美化界面
人工智能·笔记·ai·开源·ai编程
易连EDI—EasyLink6 小时前
易连EDI–EasyLink实现OCR智能数据采集
网络·人工智能·安全·汽车·ocr·edi
冬奇Lab6 小时前
RAG 系列(二):用 LangChain 搭建你的第一个 RAG Pipeline
人工智能·langchain·llm