根据pdf文档生成问答并进行评估

目标是根据pdf文档生成问答,并进行评估。

首先,安装依赖

pip install PyPDF2 pandas tqdm openai -q

具体过程如下:

1、将pdf放在opeai_blog_pdfs目录下,引用依赖

2、上传pdf文件,创建向量库

3、单个提问的向量检索

4、单个提问的检索结果

5、生成问题列表,这里需要注意chunk的大小及重合。

6、单个文档生成问题的过程

7、把所有文档的问题存在字典中

8、把所有问题存储在rows列表中

9、问答评估实现

10、单个评估验证

11、迭代评估问答

相关推荐
AlbertZein3 小时前
Agent任务实测:谁能稳定跑完,谁只是看起来很强?
aigc·openai·ai编程
AlbertZein4 小时前
别被模型宣传骗了,真实 Agent 任务一跑就知道
aigc·openai·ai编程
武子康9 小时前
调查研究-210 Netflix 用 AI 复刻 Gene Wilder 的声音:语音克隆的下半场,不是模型,而是权利
人工智能·aigc·openai
武子康1 天前
调查研究-208 OpenAI GPT-5.6 Sol / Terra / Luna 解读:AI 模型竞争正在从“更聪明“转向“能长期干活“
人工智能·openai·claude
怕浪猫1 天前
第8章 Agent前端交互与可视化
aigc·openai·ai编程
灵感__idea2 天前
《AI工程》:为什么需要RAG和智能体?
aigc·openai·ai编程
机器之心2 天前
实锤了:Claude Code偷查用户,时区、中国AI实验室全是关键词
人工智能·openai
机器之心2 天前
飞书让表格变成「AI同事」加入群聊,不打开表就能用表
人工智能·openai
ytAnck2 天前
傻傻分不清OpenAI 与 Anthropic 接口协议差异
openai·ai编程
AlbertZein2 天前
从“看图说话”到“动手干活”:看看国产多模态模型在生产场景下的真实表现
aigc·openai·ai编程