SillyTavern使用本地大模型写故事实操手册

前置准备

  1. 安装必备工具
bash 复制代码
# 安装Homebrew (包管理器)
/bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"

# 安装Python 3.10 (M3芯片推荐)
brew install python@3.10

# 安装Node.js 20.x
brew install node@20

# 安装Git
brew install git

# 安装Ollama (用于LLM)
brew install ollama

# 安装Sox (用于CosyVoice)
brew install sox
  1. 验证安装
bash 复制代码
python3 --version  # 应显示 3.10.x
node -v            # 应显示 v20.x
ollama --version   # 应显示 0.1.x
  1. SillyTavern (情感/叙事写作)
bash 复制代码
cd ~/AI_Creation_System
git clone https://github.com/SillyTavern/SillyTavern -b release
cd SillyTavern
npm install

在 Ollama 中,Phi-3-mini 的正确拉取命令是:

bash 复制代码
ollama pull phi3:mini
ollama pull phi3:mini-q4_K_M   二选一都行 

🧪 快速测试步骤(M3 Mac 推荐)

bash 复制代码
# 1. 拉取模型(只需一次)
ollama pull phi3

# 2. 启动对话
ollama run phi3

# 3. 输入你的提示(比如):
写一个关于海边日落的微小说,要有孤独感和希望。

🔧 正确操作步骤(M3 Mac)

第一步:启动 Ollama(确保 LLM 可用)

bash 复制代码
# 确保 phi3 已安装
ollama pull phi3

# 启动 Ollama 服务(通常会自动启动)
ollama serve

✅ 验证:访问 http://localhost:11434/api/tags,应看到已安装的模型列表


第二步:启动 SillyTavern

bash 复制代码
cd ~/AI_Creation_System/SillyTavern
npm start

默认打开:http://localhost:8000


第三步:在 Web 界面中配置 Ollama(关键!)

  1. 打开浏览器 → http://localhost:3000
  2. 首次进入会看到欢迎界面,点击 "Connect to a backend"
  3. 选择 "Ollama" 作为后端
  4. 填写以下信息:
    • API URL : http://localhost:11434
    • Model : phi3(或其他你安装的模型,如 mistral、qwen:7b)
  5. 点击 "Test Connection" → 应显示 "Success!"
  6. 点击 "Save"

✅ 完成!现在你可以直接在聊天框里和 Phi-3 对话了。


配置大模型的时候要注意 这里要选择文本 ollama只支持文本模型

这是实际效果 具体怎么玩有兴趣的key自己研究下

相关推荐
方方洛2 分钟前
ray教程-25-附录E-端到端实战案例
人工智能·分布式·机器学习
火山引擎开发者社区10 分钟前
上万个 Agent 在线不乱跑,云沙箱给 Agent 造了间“独立办公室”
人工智能
神鹰手哥_起飞版10 分钟前
一句话生成带品牌 logo 的架构图:方舟 Seed 2.1 负责听懂,代码负责画准
人工智能
老马识码11 分钟前
WorkBuddy 的连接器是怎么统一到 MCP 的
人工智能
武子康14 分钟前
动作和画面时间最近,就能配成训练样本吗?
人工智能·深度学习
wangfpp16 分钟前
Skill渐进式披露指南
人工智能
Marco_康16 分钟前
AgentFleet 跨设备调度实测:303 tasks/s,设备掉线 0 丢任务
人工智能
QYR_1130 分钟前
年复合增长率11.4%!机器人指端视触觉传感器加速迈向规模化应用
人工智能·数码相机
武天旭1 小时前
AI安全--AI大模型的数据投毒攻击解析
人工智能·深度学习·安全
AI技术新视界1 小时前
LLM 提示词缓存(Prompt Caching)的秘密
人工智能·缓存·llm·prompt