本地加载hugging face模型:Bert

找了个hf的镜像站,把config.json和pytorch_model.bin两个文件进行下载下来,模型文件uncased_L-12_H-768_A-12.zip下载下来先。

解压模型文件压缩包,把前面下载的两个文件也放进去,总共6个文件。这个文件夹就是代码

tokenizer = BertTokenizer.from_pretrained(BERT_PATH)

BERT_PATH这里对应的文件路径。

Some weights of BertForSequenceClassification were not initialized from the model checkpoint at bert-base-uncased and are newly initialized: ['classifier.bias', 'classifier.weight']

pip install tensorflow

复制代码
from transformers import BertModel, BertTokenizer

model_name = 'bert-base-uncased'
tokenizer = BertTokenizer.from_pretrained(model_name)
model = BertModel.from_pretrained(model_name, from_tf=True)
相关推荐
致Great几秒前
使用 GRPO 和 OpenEnv 微调小型语言模型实现浏览器控制
数据库·人工智能·深度学习·语言模型·自然语言处理·agent·智能体
最新快讯1 分钟前
快讯 | AI教父辛顿:人工智能明年将对大量工作岗位产生实质性冲击;Copilot整合效果不佳
人工智能·科技
说私域2 分钟前
分享经济:智能名片链动2+1模式商城小程序驱动下的可持续增长引擎
大数据·人工智能·小程序
智算菩萨2 分钟前
【实战教程】利用GPT、Gemini等语言模型辅助语文作文的完全指南(里面有窗体程序,有各种方法的使用入口)
人工智能·语言模型·chatgpt
●VON3 分钟前
智造之眼:人工智能如何重塑现代工业制造
人工智能·学习·制造·von
究极无敌暴龙战神X4 分钟前
机器学习相关
人工智能·算法·机器学习
TLeung653675 分钟前
美团开源黑科技InfiniteTalk:不限视频长度AI工具,支持图生视频和视频生视频,既可本地部署也可云端部署。关键免费、免费、免费。
人工智能·科技·音视频
OpenCSG7 分钟前
MiniMax M2.1登上多语言编程基准前列。这个新模型如何打破了过去模型的“偏科“困局?
人工智能·开源·opencsg·agentichub
纪佰伦8 分钟前
类人脑的另一种计算 ——大语言模型large-lauguage-model——训练到推理三个过程
人工智能·深度学习·语言模型
汉克老师9 分钟前
小学生0基础学大语言模型应用(第12课 《循环的遥控器:break 和 continue》)
人工智能·python·语言模型·自然语言处理·continue·break·小学生学大语言模型