根据pdf文档生成问答并进行评估

目标是根据pdf文档生成问答,并进行评估。

首先,安装依赖

pip install PyPDF2 pandas tqdm openai -q

具体过程如下:

1、将pdf放在opeai_blog_pdfs目录下,引用依赖

2、上传pdf文件,创建向量库

3、单个提问的向量检索

4、单个提问的检索结果

5、生成问题列表,这里需要注意chunk的大小及重合。

6、单个文档生成问题的过程

7、把所有文档的问题存在字典中

8、把所有问题存储在rows列表中

9、问答评估实现

10、单个评估验证

11、迭代评估问答

相关推荐
用户84913717547162 小时前
🚀5 分钟实现 Markdown 智能摘要生成器:LangChain + OpenAI 实战教程
langchain·openai
William.csj4 小时前
Adobe Acrobat——设置PDF打印页面的大小
pdf
CodeCraft Studio17 小时前
PDF处理控件Aspose.PDF教程:在 C# 中更改 PDF 页面大小
前端·pdf·c#
哪吒编程20 小时前
重磅更新! 基于Gemini 2.5 打造的AI智能体PlantUML-X上线!
openai·gemini
量子位20 小时前
大模型公司挖墙脚哪家强?报告:Anthropic 人才吸引力是 OpenAI 的 8 倍,留存率达 80%
openai·ai编程
_oP_i20 小时前
提取 PDF 文件中的文字以及图片中的文字
pdf
爱吃的小肥羊1 天前
ChatGPT又双叒叕升级了,AI编程能联网,记忆功能免费用!
chatgpt·openai
集成显卡1 天前
图片压缩工具 | 图片生成PDF文档
图像处理·pdf
一路向北North1 天前
PDF.js无法显示数字签名
开发语言·javascript·pdf
程序员岳焱1 天前
Spring AI 2025重磅更新!Java程序员的AI时代正式开启
人工智能·后端·openai