简介
Ollama是一个开源的大型语言模型服务工具,它帮助用户快速在本地运行大模型。通过简单的安装指令,用户可以执行一条命令就在本地运行开源大型语言模型, Ollama极大地简化了在Docker容器内部署和管理LLM的过程,使得用户能够快速地在本地运行大型语言模型。
Ollama的安装
下载网址:https://ollama.com/
进入官网直接点击Download下载即可
下载完后会得到一个.exe文件,直接运行就会自动安装,会强制安装在C盘,无法更改路径,所以C盘要预留足够的空间。
大模型下载
1、下载完Ollama之后回到网站,点击Models
里面有很多开源模型可以下载
2、模型信息
3、下载指令
打开命令提示符,运行下面指令会自动下载
4、运行
指令
起动Ollama后在命令提示符中运行下面一些指令可以对模型进行操作