本地加载hugging face模型:Bert

找了个hf的镜像站,把config.json和pytorch_model.bin两个文件进行下载下来,模型文件uncased_L-12_H-768_A-12.zip下载下来先。

解压模型文件压缩包,把前面下载的两个文件也放进去,总共6个文件。这个文件夹就是代码

tokenizer = BertTokenizer.from_pretrained(BERT_PATH)

BERT_PATH这里对应的文件路径。

Some weights of BertForSequenceClassification were not initialized from the model checkpoint at bert-base-uncased and are newly initialized: ['classifier.bias', 'classifier.weight']

pip install tensorflow

复制代码
from transformers import BertModel, BertTokenizer

model_name = 'bert-base-uncased'
tokenizer = BertTokenizer.from_pretrained(model_name)
model = BertModel.from_pretrained(model_name, from_tf=True)
相关推荐
人机与认知实验室11 小时前
国内主流大语言模型之比较
人工智能·语言模型·自然语言处理
T0uken11 小时前
【Python】UV:境内的深度学习环境搭建
人工智能·深度学习·uv
七宝大爷11 小时前
基于人类反馈的强化学习(RLHF):ChatGPT“对齐”人类的秘密武器
人工智能·chatgpt
shayudiandian12 小时前
ChatGPT风格对话机器人搭建教程
人工智能·chatgpt·机器人
腾讯云开发者12 小时前
TVP首场香港活动重磅启幕,AI出海变革风向如何把握?
人工智能
wasp52012 小时前
Spring AI 代码分析(十)--Spring Boot集成
人工智能·spring boot·spring
AI即插即用12 小时前
即插即用系列 | 2025 MambaNeXt-YOLO 炸裂登场!YOLO 激吻 Mamba,打造实时检测新霸主
人工智能·pytorch·深度学习·yolo·目标检测·计算机视觉·视觉检测
BagMM12 小时前
DetLH论文阅读
人工智能·计算机视觉·目标跟踪
fundroid12 小时前
Androidify:谷歌官方 AI + Android 开源示例应用
android·人工智能·开源
居然JuRan12 小时前
大模型瘦身术:量化与蒸馏技术全解析
人工智能