大语言模型典型本地搭建及其应用

1 Ollama奠基及其应用

1.1 命令终端交互操控

1.2 可视窗口交互操控

1.3 自定义模型应用

1.4 U盘载体运行

2 OpenWebUI页面交互应用

3 LMStudio视窗交互应用

4 ChatBox视窗交互应用

5 CherryStudio视窗交互应用

5.1 基本对话文本应用

5.2 本地知识库构建

5.3 本地代码库构建

5.4 本地服务MCP调用

5.4.1 文件操控

5.4.2 数据库访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地SQLite数据库的灵活操控访问,所有功能可以在浏览器窗口测试。源码案例和指导文档很多,本想可以一蹴而就,可始终无果。于是,采用FastMcp库本地编码搭建简单MCP服务,服务器事件推送SSE,几经调试和完善,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.3 StreamableHTTP访问

基于主流大语言模型LLM高效应用CherryStudio环境,做本地模型上下文MCP快速应用,实现:AI-MCP本地流媒(streamableHTTP)音频服务器设计与CherryStudio部署应用。起初选用简易的cherrypy库做起MCP服务器,浏览器测试没有问题,CherryStudio环境部署但不能应用。后改用FastMCP库,终于做到:浏览器可以测试,CherryStudio环境可以部署而且可以应用。

5.4.4 高德/百度地图访问

相关推荐
星越华夏1 小时前
计算机视觉:YOLOv12安装环境
人工智能·yolo·计算机视觉
Yolanda942 小时前
【人工智能】《从零搭建AI问答助手项目(九):Prompt优化》
人工智能·prompt
wj3055853782 小时前
课程 9:模型测试记录与 Prompt 策略
linux·人工智能·python·comfyui
小和尚同志2 小时前
深入使用 skill-creator:结合真实生产级实践
人工智能·aigc
DevSecOps选型指南2 小时前
安全419专访悬镜安全 | 穿越周期在 AI 浪潮中定义数字供应链安全新范式
人工智能
沪漂阿龙2 小时前
面试题详解:GraphRAG 全面解析——知识图谱增强 RAG、Local Search、Global Search、社区摘要、工程落地与评估指标一次讲透
人工智能·知识图谱
WangN22 小时前
Unitree RL Lab 学习笔记【通识】
人工智能·机器学习
haina20193 小时前
海纳AI亮相《科创中国》,解码招聘“智”变之路
人工智能·ai面试·ai招聘
阿星AI工作室3 小时前
刘润年中大课笔记:一句话说清AI落地之战的本质
大数据·人工智能·创业创新·商业
qingfeng154153 小时前
企业微信机器人开发:如何实现自动化与智能运营?
人工智能·python·机器人·自动化·企业微信