深度学习速通系列:超长法律文件隐私过滤(基于预训练模型Bert)

法律文件隐私过滤

网上使用bert的中文模型进行命名识别教程少的可怜,摸索了一周的时间,硬是把法律文书的人名全部识别出来了,目前可以达到98.9999%(开玩笑的,不过准确率保守估计是有90%以上).注意:这个法律文书目前只是针对裁决书,其他还没测试过,可支持超长文本识别

github仓库地址

欢迎各位点个☆Star!!!

使用的模型

bert-base-chinese-ner 下载路径:https://hf-mirror.com/ckiplab/bert-base-chinese-ner (国内镜像,不用魔法也能访问)

下载好,直接放在当前目录下

使用步骤

python 复制代码
1.先去下载模型,放在当前目录下
2.将里面的text改成你的文本,即"text=''' 你的法律文书内容''' "
3.全局搜索from_pretrained,后面的两处路径都改成模型的绝对路径
4.启动person_filterling.py文件
5.在当前目录找到一个.docx文件,直接打开,就可以看到识别后的文件了

提醒

虽然项目只是针对了法律文书进行了调整,也可以尝试使用其他类型文本,效果应该也是可观的

相关推荐
小李不困还能学几秒前
PyCharm下载安装与配置教程
ide·python·pycharm
神奇小汤圆5 分钟前
用 Solon AI ReActAgent 落地智能客服工单处理
人工智能
Days20506 分钟前
好酷AI制作漫剧软件
人工智能
AI-好学者7 分钟前
RDF对比与Neo4j性能优化
人工智能·知识图谱·neo4j·knowledge graph
博观而约取厚积而薄发10 分钟前
Pytest 从入门到精通,一篇就够(超详细实战教程)
python·测试工具·单元测试·自动化·pytest
美狐美颜SDK开放平台11 分钟前
从RTC到AI美颜:直播APP开发中的直播美颜SDK技术架构解析
人工智能·音视频·实时音视频·美颜sdk·视频美颜sdk·美颜api
imzed20 分钟前
使用 Playwright + Pytest 构建 Web UI 自动化测试框架
python·自动化·pytest
SNKXD_124 分钟前
2026年AI数字人直播平台推荐,哪款更适配中小企业常态化开播?
人工智能
普通网友25 分钟前
pytest一些常见的插件
开发语言·python·pytest