SillyTavern使用本地大模型写故事实操手册

前置准备

  1. 安装必备工具
bash 复制代码
# 安装Homebrew (包管理器)
/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"

# 安装Python 3.10 (M3芯片推荐)
brew install python@3.10

# 安装Node.js 20.x
brew install node@20

# 安装Git
brew install git

# 安装Ollama (用于LLM)
brew install ollama

# 安装Sox (用于CosyVoice)
brew install sox
  1. 验证安装
bash 复制代码
python3 --version  # 应显示 3.10.x
node -v            # 应显示 v20.x
ollama --version   # 应显示 0.1.x
  1. SillyTavern (情感/叙事写作)
bash 复制代码
cd ~/AI_Creation_System
git clone https://github.com/SillyTavern/SillyTavern -b release
cd SillyTavern
npm install

在 Ollama 中,Phi-3-mini 的正确拉取命令是:

bash 复制代码
ollama pull phi3:mini
ollama pull phi3:mini-q4_K_M   二选一都行 

🧪 快速测试步骤(M3 Mac 推荐)

bash 复制代码
# 1. 拉取模型(只需一次)
ollama pull phi3

# 2. 启动对话
ollama run phi3

# 3. 输入你的提示(比如):
写一个关于海边日落的微小说,要有孤独感和希望。

🔧 正确操作步骤(M3 Mac)

第一步:启动 Ollama(确保 LLM 可用)

bash 复制代码
# 确保 phi3 已安装
ollama pull phi3

# 启动 Ollama 服务(通常会自动启动)
ollama serve

✅ 验证:访问 http://localhost:11434/api/tags,应看到已安装的模型列表


第二步:启动 SillyTavern

bash 复制代码
cd ~/AI_Creation_System/SillyTavern
npm start

默认打开:http://localhost:8000


第三步:在 Web 界面中配置 Ollama(关键!)

  1. 打开浏览器 → http://localhost:3000
  2. 首次进入会看到欢迎界面,点击 "Connect to a backend"
  3. 选择 "Ollama" 作为后端
  4. 填写以下信息:
    • API URL : http://localhost:11434
    • Model : phi3(或其他你安装的模型,如 mistralqwen:7b
  5. 点击 "Test Connection" → 应显示 "Success!"
  6. 点击 "Save"

✅ 完成!现在你可以直接在聊天框里和 Phi-3 对话了。


配置大模型的时候要注意 这里要选择文本 ollama只支持文本模型

这是实际效果 具体怎么玩有兴趣的key自己研究下

相关推荐
Xpower 1714 小时前
OpenClaw实战:从零开发电商小程序(2)
人工智能·语言模型·小程序·gateway
PNP Robotics14 小时前
PNP机器人亮相第二届机器人灵巧手国际创新大会
人工智能·学习·机器人·开源
凤年徐14 小时前
保姆级教程:从零搭建AI系统权限控制系统
人工智能
( ˶˙⚇˙˶ )୨⚑︎14 小时前
深度学习与机器学习如何选择?
人工智能·深度学习·机器学习
apocalypsx14 小时前
含并行连接的网络GoogLeNet
网络·人工智能·深度学习
Shining059614 小时前
AI 编译器系列(六)《Stable Diffusion 在 InfiniTensor 推理框架中的适配与工程实践》
人工智能·算法·stable diffusion·大模型·图像生成·ai编译器·infinitensor
庞轩px14 小时前
2小时完成大模型推理网关:一次AI Coding实战记录
人工智能·大模型·笔试·ai编程·ai coding
Ellenjing14 小时前
架构演进与性能压榨:在金融 RAG 中引入条款森林 (FoC)
人工智能·aigc·知识图谱
薛定猫AI14 小时前
【深度解析】从玩具项目到全栈生产:Google AI Studio + Antigravity 的新范式
人工智能
万里鹏程转瞬至16 小时前
InternVL(1~3.5版本)多模型大模型训练中的数据集构造总结
人工智能