根据pdf文档生成问答并进行评估

目标是根据pdf文档生成问答,并进行评估。

首先,安装依赖

pip install PyPDF2 pandas tqdm openai -q

具体过程如下:

1、将pdf放在opeai_blog_pdfs目录下,引用依赖

2、上传pdf文件,创建向量库

3、单个提问的向量检索

4、单个提问的检索结果

5、生成问题列表,这里需要注意chunk的大小及重合。

6、单个文档生成问题的过程

7、把所有文档的问题存在字典中

8、把所有问题存储在rows列表中

9、问答评估实现

10、单个评估验证

11、迭代评估问答

相关推荐
吴凡wudianmei4 小时前
从 0 搭一个 AI Agent(三):SSE 流式输出,让 AI 边想边说
架构·llm·openai
AI日报派送佬4 小时前
2026年11月01日AI行业日报|可灵AI198亿融资落地、DeepSeek开源超级智能体、Anthropic取消Ultra时长限制
人工智能·开源·openai·deepseek·anthropic·ai日报
threerocks7 小时前
运营 X(Twitter)的 Chrome 插件,看这篇就够了
aigc·openai·ai编程
汤姆宝库10 小时前
法考历年真题及答案解析合集pdf版(2002-2025年)
pdf·法考
墨林陌11 小时前
AI 热点日报(2026-11-02):Anthropic 递交千亿美元级 IPO 招股书,苹果智能接入千问落地中国
openai
lucas_AI11 小时前
「无限 Codex」白嫖项目终结?OpenAI 12 月起把 ChatGPT 与 Codex 额度合成一个池子
chatgpt·openai
优化控制仿真模型11 小时前
2026【英一】考研英语一历年真题及答案解析PDF电子版(1980-2025年)
考研·pdf
攻城狮7号11 小时前
GPT-6.1 Terra:Agent 开始比拼“谁更划算”
openai·agent·gpt-6.1 terra
vipxieliang12 小时前
微服务架构设计:从拆分到治理的完整指南
openai·ai编程
vipxieliang12 小时前
存算一体与感存算融合:类脑视觉的技术突破
openai