本地加载hugging face模型:Bert

找了个hf的镜像站,把config.json和pytorch_model.bin两个文件进行下载下来,模型文件uncased_L-12_H-768_A-12.zip下载下来先。

解压模型文件压缩包,把前面下载的两个文件也放进去,总共6个文件。这个文件夹就是代码

tokenizer = BertTokenizer.from_pretrained(BERT_PATH)

BERT_PATH这里对应的文件路径。

Some weights of BertForSequenceClassification were not initialized from the model checkpoint at bert-base-uncased and are newly initialized: ['classifier.bias', 'classifier.weight']

pip install tensorflow

复制代码
from transformers import BertModel, BertTokenizer

model_name = 'bert-base-uncased'
tokenizer = BertTokenizer.from_pretrained(model_name)
model = BertModel.from_pretrained(model_name, from_tf=True)
相关推荐
迦南的迦 亚索的索2 分钟前
AI_11_Coze_AI面试助手
人工智能·面试·职场和发展
pangtout21 分钟前
国云强智:天翼云押注Token,争夺AI时代新入口
人工智能
dog25023 分钟前
圆锥曲线和二次曲线
开发语言·网络·人工智能·算法·php
岛雨QA24 分钟前
🎉Token自由-Ollama部署本地大模型超详细操作指南
人工智能·llm·ollama
云游27 分钟前
从“人工打补丁”到“自主进化”:多轮对话文本转SQL智能体的技术跃迁
人工智能·文本转sql
区块block32 分钟前
Infinity Alpha(无限阿尔法)即将发布纯链上AI收益引擎通证IA
人工智能·区块链
有为少年33 分钟前
从概率估计到“LLM 训练是有损压缩”
人工智能·线性代数·机器学习·计算机视觉·矩阵
迦南的迦 亚索的索34 分钟前
AI_10_Coze_Multi-Agent多智能体
人工智能
:mnong38 分钟前
理解 AI 时代的软件范式
人工智能·log4j
小飞象—木兮39 分钟前
《销售数据分析标准实践手册》:核心内涵与关键指标、落地销售数据分析的全流程···(附相关材料下载)
大数据·人工智能·数据挖掘·数据分析