decapoda-research/llama-7b-hf 的踩坑记录

夏离2023-10-27 23:42

使用transformers加载decapoda-research/llama-7b-hf的踩坑记录。

  1. ValueError: Tokenizer class LLaMATokenizer does not exist or is not currently imported.

    解决办法：

    https://github.com/huggingface/transformers/issues/22222

    将tokenizer_config.json中LLaMATokenizer改为LlamaTokenizer。

  2. RecursionError: maximum recursion depth exceeded while getting the str of an object.

    解决办法：

    https://github.com/huggingface/transformers/issues/22762

    使用tokenizer_config.json替换原本的tokenizer_config.json

相关推荐
寒水馨1 天前
Windows下载、安装ollama-v0.32.1（附安装包OllamaSetup.exe）
windows·llm·大语言模型·llama·本地部署·ollama·模型运行
老刘说AI2 天前
AI服务核心： 高并发原理与性能监控调优
人工智能·神经网络·langchain·llama·持续部署
头茬韭菜3 天前
Kronos 模型推理性能基准测试报告
llama
亮亮在江湖3 天前
# 手写原生Transformers SFT脚本 vs LLaMA Factory 训练 核心完整对比
llama
染指11103 天前
61.RAG-RAG存在的问题
人工智能·llama·rag·llama_index·llamaindex
CClaris8 天前
大模型量化从0到1（九）：用 llama.cpp 把模型转成 GGUF 并跑本地推理
人工智能·pytorch·python·深度学习·llama
染指11108 天前
56.llama_index-查询引擎
人工智能·llama·rag·llama_index·llamaindex
_codemonster8 天前
从零手搓大模型（七）GPT 转 Llama：从教学版 GPT 走向现代 LLM 架构
人工智能·gpt·大模型·llama
SLD_Allen9 天前
Purple Llama：Meta开源的LLM安全“紫队”工具箱
安全·开源·llama
俊俊谢9 天前
从零搭建：本地LangChain Agent调用远程LLaMA-Factory模型服务
langchain·llama
热门推荐
01GitHub 镜像站点022026年7月AI圈大地震：GPT-5.6被政府限制、Claude入驻Slack、Anthropic自研芯片03如何新建文件夹？ 电脑新建文件夹的4种方法04国内可直接用、免费额度/永久免费的大模型API清单（含 SiliconFlow、火山、阿里、智谱、百度、Kimi、DeepSeek、DMXAPI 等）05AI科技热点日报 | 2026年07月01日06AI 编程 IDE 全景解析 2026：Agent 全面接管开发链路07幻兽帕鲁 - 服务器管理员权限与 GM 命令完全指南08微信历史版本含下载地址（ Windows PC | 安卓 | MAC ）及设置微信不更新09【解构】DeepSeek V4 发布：技术报告深度解读 + 横向对比六大开源模型，我们的判断是……102026 国产 AI 大模型横评：DeepSeek、通义千问、Kimi、文心一言、星火、豆包谁更能打？