python-在transformers的问答模型中使用中文

  1. 先安装transformers

  2. 在huggingface下载模型
    模型bert-multi-cased-finetuned-xquadv1可以从huggingface中下载,具体操作方法可以参照文章https://blog.csdn.net/zhaomengsen/article/details/130616837下载

  3. git clone就可以了

  4. 然后使用pipline加载模型

    from transformers import pipeline
    nlp = pipeline("question-answering",model="mrm8488/bert-multi-cased-finetuned-xquadv1",tokenizer="mrm8488/bert-multi-cased-finetuned-xquadv1")

  5. 测试

    context = """非root用户使用HBase客户端,请确保该HBase客户端目录的属主为该用户,否则请参考如下命令修改属主"""
    question = "命令是什么?"
    result = nlp(question=question, context=context)
    print("Answer:", result['answer'])
    print("Score:", result['score'])

    Answer: 修改属主
    Score: 0.9437811374664307

相关推荐
千寻girling3 小时前
一份不可多得的 《 Django 》 零基础入门教程
后端·python·面试
databook7 小时前
探索视觉的边界:用 Manim 重现有趣的知觉错觉
python·动效
明月_清风8 小时前
Python 性能微观世界:列表推导式 vs for 循环
后端·python
明月_清风8 小时前
Python 性能翻身仗:从 O(n) 到 O(1) 的工程实践
后端·python
helloweilei1 天前
python 抽象基类
python
用户8356290780511 天前
Python 实现 PPT 转 HTML
后端·python
zone77391 天前
004:RAG 入门-LangChain读取PDF
后端·python·面试
zone77391 天前
005:RAG 入门-LangChain读取表格数据
后端·python·agent
树獭非懒2 天前
AI大模型小白手册|Embedding 与向量数据库
后端·python·llm
唐叔在学习2 天前
就算没有服务器,我照样能够同步数据
后端·python·程序员