decapoda-research/llama-7b-hf 的踩坑记录

夏离2023-10-27 23:42

使用transformers加载decapoda-research/llama-7b-hf的踩坑记录。

  1. ValueError: Tokenizer class LLaMATokenizer does not exist or is not currently imported.

    解决办法：

    https://github.com/huggingface/transformers/issues/22222

    将tokenizer_config.json中LLaMATokenizer改为LlamaTokenizer。

  2. RecursionError: maximum recursion depth exceeded while getting the str of an object.

    解决办法：

    https://github.com/huggingface/transformers/issues/22762

    使用tokenizer_config.json替换原本的tokenizer_config.json

相关推荐
m0_608570984 小时前
使用 GaLore 预训练LLaMA-7B
微调·llama·训练
AI知识分享官1 天前
智能绘画Midjourney AIGC在设计领域中的应用
人工智能·深度学习·语言模型·chatgpt·aigc·midjourney·llama
逐梦苍穹2 天前
速通LLaMA1：《LLaMA: Open and Efficient Foundation Language Models》全文解读
人工智能·语言模型·llama
张3蜂2 天前
Ubuntu LLaMA-Factory实战
llama
逐梦苍穹2 天前
速通LLaMA2：《Llama 2: Open Foundation and Fine-Tuned Chat Models》全文解读
论文阅读·人工智能·语言模型·llama·论文笔记·llama2
telllong2 天前
使用llama.cpp 在推理MiniCPM-1.2B模型
c++·llama·llama.cpp
我爱学Python!5 天前
大模型教程：使用 Milvus、vLLM 和 Llama 3.1 搭建 RAG 应用
自然语言处理·大模型·llm·大语言模型·llama·milvus·rag
强哥之神6 天前
白话：大型语言模型中的幻觉（Hallucinations）
人工智能·机器学习·语言模型·自然语言处理·llm·llama·hallucinations
wx7408513267 天前
小琳AI课堂：LLaMA 3.1 开源大模型的全新里程碑
人工智能·llama
YueTann7 天前
大模型入门3:理解LLAMA
android·llama
热门推荐
01RAG 实践- Ollama+RagFlow 部署本地知识库02组基轨迹建模 GBTM的介绍与实现（Stata 或 R）032024年高教社杯数学建模国赛C题超详细解题思路分析04CCF-CSP认证考试 202406-3 文本分词 100分题解05苍穹外卖面试总结06【2024数模国赛赛题思路公开】国赛B题思路丨附可运行代码丨无偿自提07软件工程从理论到实践客观题汇总(头歌第一章至第八章)08yolov8实战第五天——yolov8+ffmpg实时视频流检测并进行实时推流——（推流，保姆教学）09【2024高教社杯全国大学生数学建模竞赛】B题 生产过程中的决策问题——解题思路 代码 论文10实战 | 基于YOLOv9和OpenCV实现车辆跟踪计数（步骤 + 源码）