根据pdf文档生成问答并进行评估

目标是根据pdf文档生成问答,并进行评估。

首先,安装依赖

pip install PyPDF2 pandas tqdm openai -q

具体过程如下:

1、将pdf放在opeai_blog_pdfs目录下,引用依赖

2、上传pdf文件,创建向量库

3、单个提问的向量检索

4、单个提问的检索结果

5、生成问题列表,这里需要注意chunk的大小及重合。

6、单个文档生成问题的过程

7、把所有文档的问题存在字典中

8、把所有问题存储在rows列表中

9、问答评估实现

10、单个评估验证

11、迭代评估问答

相关推荐
yz17800414103 小时前
window pdf文件批量转高清图片png、jpg
pdf·bash
Jagger_5 小时前
掌握WBS:提升项目管理效率的实用指南
aigc·openai·ai编程
算家计算12 小时前
OpenAI秘密测试ChatGPT安全路由引争议:AI如何平衡人性化与安全性?
人工智能·chatgpt·openai
老歌老听老掉牙16 小时前
PDF转图片工具:基于PyQt5的完整实现与深度解析
python·qt·pdf
机器之心19 小时前
大神爆肝一个月,复刻DeepMind世界模型,300万参数就能玩实时交互像素游戏
人工智能·openai
winfredzhang1 天前
python图片处理与PDF生成程序详解
python·pdf·图片·解压
vectorlogic1 天前
万兴PDF专家免费版下载安装教程
其他·pdf
伊织code1 天前
python-poppler - PDF文档处理Python绑定库
开发语言·python·pdf·python-poppler
h_65432101 天前
csv、pdf文件预览uniapp-H5
pdf·uni-app·csv
m0_526119401 天前
pdf文件根据页数解析成图片 js vue3
前端·javascript·pdf