InfiniSynapse: 把PDF里的表格和Excel/业务数据联合分析

InfiniSynapse 可以把藏匿在文档中的小二维表格和实际的业务结构化数据做联合分析,实现了一种真正意义的"数据挖掘",极大的扩大了数据的提取质量。

前言

数据分析其实大概是两种大的类型。 一个是文档,我们简称 docs,文档里面可能还有少量表格。比如某个公司的财务报告的PDF里就有很多二维表格数据。所以非结构化数据往往蕴含了大量的结构化数据。

第二类就是结构化数据,我们简称为data. 也就是大家常见的 Excel数据,业务数据库、数仓里的数据。

或者这样的:

Data 数据里其实也有大量非结构化数据,比如某个某个字段其实是一个大文本字段。

InfiniSynapse 对两类数据分别做了映射,docs 数据映射到知识库,data 类的数据放在数据源。

如前所述,在实际场景里,我们可能希望从知识库获取一个小的二维表格,然后和数据集里的实际数据做关联分析。 InfiniSynapse 支持这种融汇贯通。我们一个一个来。

知识库里的表格数据单独使用

先创建个知识库:

然后上传PDF文档:

文档里有这样的表格:

现在,可以直接在问了:

系统就会从知识库获取信息,注册成表,然后做计算:

注意,这里我们的是通过SQL做计算的,而不是AI自己做的计算,所以准确度有保障,绕过AI不太会做计算的问题。

把PDF里的表格和Excel/业务数据联合分析

现在就到了今天的重点,我如何把 PDF 里的表格和csv里的数据做关联分析呢?创建数据源:

然后 RAG 关联那,选择我们前面建的知识库。接着上传数据:

在智能问答页面添加数据源:

然后询问问题。这里,我们希望把知识库里的月度数据和csv里的数据做一个对比验证。最后执行结果如下:

在这里,InfiniSynapse 汇报知识库里的小表格注册成一张表:

然后和csv的数据集做关联分析。

总结

InfiniSynapse 可以把藏匿在文档中的小二维表格和实际的业务结构化数据做联合分析,实现了一种真正意义的"数据挖掘",极大的扩大了数据的提取质量。

想查看文章的最新版本,可以点击原文链接。

相关推荐
jayson.h13 小时前
python——pdf编辑
前端·python·pdf
MaiTube&Maipdf14 小时前
MaiPDF 在线分享
pdf
一晌小贪欢14 小时前
python-第15天:Python 列表推导式
开发语言·python·excel·数据可视化·python办公
Metaphor69214 小时前
使用 Python 快速拆分 PDF 文件
python·pdf
tryxr19 小时前
Chat2Excel 项目通用服务开发
java·开发语言·excel·java项目开发
MaiTube&Maipdf19 小时前
.maipdf 文件 + 系统级拒绝截屏 + 交付后仍可吊销
安全·pdf
Jazz_z19 小时前
使用 Python 合并与取消合并 Excel 单元格
开发语言·python·excel
web打印社区1 天前
网页静默打印热敏小票:从 HTML 到出纸的完整指南
前端·javascript·vue.js·electron·pdf·html
2601_962381862 天前
Python办公联动:Excel数据一键自动生成PPT图表
python·数据分析·自动化·excel·ppt
eybk3 天前
python将图片pdf文件转为透明文字的pdf文件
pdf