Windows系统编译支持GPU的llama.cpp

Windows系统编译支持GPU的llama.cpp

bash 复制代码
git clone https://github.com/ggerganov/llama.cpp.git
cd llama.cpp
mkdir build
cd build
bash 复制代码
cmake .. -G "Visual Studio 17 2022" -DGGML_CUDA=ON -DCMAKE_BUILD_TYPE=Release -DCMAKE_CUDA_ARCHITECTURES="86"
bash 复制代码
cmake --build . --config Release -- /m
相关推荐
喜欢吃豆2 小时前
llama.cpp 全方位技术指南:从底层原理到实战部署
人工智能·语言模型·大模型·llama·量化·llama.cpp
习惯就好zz6 小时前
WSL2 安装Ubuntu卡在安装进度0%无响应问题解决
linux·windows·ubuntu·wsl·wsl2
仰望—星空10 小时前
MiniEngine学习笔记 : CommandListManager
c++·windows·笔记·学习·cg·direct3d
ue星空12 小时前
Windows内核函数使用
windows
业余幻想家14 小时前
Windows10/Windows11家庭版系统关闭自动更新
运维·windows
阿猿收手吧!15 小时前
windows本机vscode通过ssh免密登录远程linux服务器 && git push/pull 免密
服务器·windows·vscode
zxm851315 小时前
如何在Windows系统中加入程序自启动
windows
skywalk816315 小时前
在星河社区部署大模型unsloth/Llama-3.3-70B-Instruct-GGUF
llama·aistudio
鹿子沐15 小时前
LlamaFactory微调效果与vllm部署效果不一致
人工智能·llama
~~李木子~~15 小时前
Windows软件自动扫描与分类工具 - 技术文档
windows·分类·数据挖掘