引入BertTokenizer出现OSError: Can‘t load tokenizer for ‘bert-base-uncased‘.

今天在跑一个模型的时候出现该报错,完整报错为:

bash 复制代码
OSError: Can't load tokenizer for 'bert-base-uncased'. If you were trying to load it from 'https://huggingface.co/models', make sure you don't have a local directory with the same name. Otherwise, make sure 'bert-base-uncased' is the correct path to a directory containing all relevant files for a BertTokenizer tokenizer.

找了半天一直没找到解决方案,最后发现是transformers库的版本问题,要么在终端运行:

conda install transformers

要么就是更新该库transformers

就能解决了。

相关推荐
Smaller、FL8 分钟前
介绍MCP的背景及流程
人工智能·自然语言处理·llm·deepseek·mcp
一ge科研小菜鸡26 分钟前
云原生时代的系统设计:架构转型的战略支点
大数据·人工智能
jndingxin33 分钟前
OpenCV CUDA模块图像变形------对图像进行上采样操作函数pyrUp()
人工智能·opencv·计算机视觉
一块plus39 分钟前
Polkadot 的 Web3 哲学:从乔布斯到 Gavin Wood 的数字自由传承
人工智能·程序员·架构
Java学术趴40 分钟前
Transformer架构解密:从自注意力到组件协同,一文读懂AI核心引擎
人工智能
神州问学44 分钟前
从DeepSeek-V3到DeepSeek-R1:中国AI团队的技术突破与创新
人工智能
神州问学1 小时前
AutoGLM沉思版:智能体推理的Deep Research探索
人工智能·python
Sherlock Ma1 小时前
Seedance:字节发布视频生成基础模型新SOTA,能力全面提升
人工智能·深度学习·计算机视觉·aigc·音视频·扩散模型·视频生成
浙江赛思电子科技有限公司1 小时前
学校时钟系统,标准考场时钟系统,AI亮相2025高考,赛思时钟系统为教育公平筑起“精准防线”
人工智能·高考
乱世刀疤1 小时前
商业 |AI超级工厂:“AI+制造”的终极目标?
人工智能·工业互联网