MindSearch CPU-only 版部署

MindSearch CPU-only 版部署

MindSearch 是一个由上海人工智能实验室推出的开源 AI 搜索引擎框架,具有与 Perplexity.ai Pro 相同的性能。

本文以 InternStudio 算力平台为例,来部署 CPU-only 的 MindSearch。

环境准备

获取资源

bash 复制代码
mkdir -p /root/mindsearch
cd /root/mindsearch
git clone https://github.com/InternLM/MindSearch.git
cd MindSearch && git checkout b832275 && cd ..

创建虚拟环境

bash 复制代码
# 创建环境
conda create -n mindsearch python=3.10 -y
# 激活环境
conda activate mindsearch
# 安装依赖
pip install -r /root/mindsearch/MindSearch/requirements.txt

chat API服务设置

这里使用网络上的API,使用硅基流动的 API Key,所以接下来便是注册并获取 API Key 了。

首先,我们打开 https://account.siliconflow.cn/login 来注册硅基流动的账号(如果注册过,则直接登录即可)。

在完成注册后,打开 https://cloud.siliconflow.cn/account/ak 来准备 API Key。首先创建新 API 密钥,然后点击密钥进行复制,以备后续使用。
复制密钥备用

export SILICON_API_KEY=sk-odfiftjbwwmwoycqxypwjijkfsmizeplumhlmifajwggtsij

启动mindsearch后端

bash 复制代码
export SILICON_API_KEY=第二步中复制的密钥
conda activate mindsearch
cd /root/mindsearch/MindSearch
python -m mindsearch.app --lang cn --model_format internlm_silicon --search_engine DuckDuckGoSearch

如果报错:

bash 复制代码
ImportError: cannot import name 'AutoRegister' from 'class_registry' (/root/.conda/envs/mindsearch/lib/python3.10/site-packages/class_registry/__init__.py)

则:

bash 复制代码
 pip install --upgrade class_registry

启动mindsearch前端

bash 复制代码
conda activate mindsearch
cd /root/mindsearch/MindSearch
python frontend/mindsearch_gradio.py

默认启动在7882端口:

访问

做下端口映射转发

对话


部署到 HuggingFace Space
(略),连接不上。

相关推荐
探物 AI1 分钟前
零样本、免训练!SAM-Body4D 来了:实现视频级 4D 人体网格重建,复杂遮挡也能稳如泰山
人工智能·计算机视觉
渡我白衣2 分钟前
触类旁通——迁移学习、多任务学习与元学习
人工智能·深度学习·神经网络·学习·机器学习·迁移学习·caffe
千桐科技2 分钟前
受邀出席!江苏省属企业人工智能应用场景发布会,共绘“数据-知识-决策”新蓝图
人工智能·知识图谱·数据中台·qdata·qknow·千桐科技·智能体构建平台
HySpark2 分钟前
会议离线转记实战:静音幻觉修复、Qwen-ASR 集成与高并发优化
人工智能·语音识别
qcx2315 分钟前
Karpathy 用三步杀死了自己发明的概念——然后指出了AI的下一个形态
人工智能
SimpleLearingAI16 分钟前
ROPE:大模型必学操作
人工智能·算法
万里鹏程转瞬至17 分钟前
公式图解一文搞懂为什么transform里是kv cache不是q cache?
人工智能·深度学习
咕咕姐与Ai18 分钟前
扣子(Coze)实战:秒出一条情感早安电台!工作流,把治愈内容做成了全自动流水线
大数据·人工智能·程序人生·语言模型·ai写作
慕容卡卡21 分钟前
大模型核心,MCP(模型上下文协议)和Session API
java·开发语言·人工智能·spring boot·spring cloud
SEO_juper24 分钟前
内容被 AI 摘录了,但没带你的网址?GEO 溯源这样补
人工智能·谷歌·seo·geo·ai时代·跨境电商推广·内容创作者