本地加载hugging face模型:Bert

找了个hf的镜像站,把config.json和pytorch_model.bin两个文件进行下载下来,模型文件uncased_L-12_H-768_A-12.zip下载下来先。

解压模型文件压缩包,把前面下载的两个文件也放进去,总共6个文件。这个文件夹就是代码

tokenizer = BertTokenizer.from_pretrained(BERT_PATH)

BERT_PATH这里对应的文件路径。

Some weights of BertForSequenceClassification were not initialized from the model checkpoint at bert-base-uncased and are newly initialized: ['classifier.bias', 'classifier.weight']

pip install tensorflow

复制代码
from transformers import BertModel, BertTokenizer

model_name = 'bert-base-uncased'
tokenizer = BertTokenizer.from_pretrained(model_name)
model = BertModel.from_pretrained(model_name, from_tf=True)
相关推荐
北京盛世宏博17 分钟前
档案馆空气质量联网监控趋势分析
人工智能·gru·lstm
小小码农一只42 分钟前
AI与区块链结合的未来:数据安全与去中心化应用的探索
人工智能·去中心化·区块链
赵得C1 小时前
深度学习中的梯度问题与激活函数选择:从理论到实践
人工智能·深度学习
金融小师妹1 小时前
基于LSTM-GARCH混合模型:降息预期驱动金价攀升,白银刷新历史峰值的蒙特卡洛模拟验证
大数据·人工智能·深度学习·1024程序员节
A达峰绮1 小时前
AI时代下的护城河:哪些行业正被重塑,哪些将永不消失?
人工智能·ai·aigc
机器之心1 小时前
这下Altman急了,OpenAI紧急启动「红色警报」
人工智能·openai
新智元1 小时前
OpenAI 危!DeepSeek 放大招:追平谷歌最强,手撕 GPT-5 High
人工智能·openai
新知图书1 小时前
【新书推荐】《玩转FastGPT:像搭积木一样构建智能体》
人工智能·ai agent·智能体·大模型应用开发·大模型应用
EkihzniY1 小时前
汽车VIN码识别:解锁汽车行业的智能密码
人工智能·汽车
机器之心1 小时前
华为新开源!扩散语言模型突破32K上下文,还解锁了「慢思考」
人工智能·openai