InfiniSynapse: 把PDF里的表格和Excel/业务数据联合分析

InfiniSynapse 可以把藏匿在文档中的小二维表格和实际的业务结构化数据做联合分析,实现了一种真正意义的"数据挖掘",极大的扩大了数据的提取质量。

前言

数据分析其实大概是两种大的类型。 一个是文档,我们简称 docs,文档里面可能还有少量表格。比如某个公司的财务报告的PDF里就有很多二维表格数据。所以非结构化数据往往蕴含了大量的结构化数据。

第二类就是结构化数据,我们简称为data. 也就是大家常见的 Excel数据,业务数据库、数仓里的数据。

或者这样的:

Data 数据里其实也有大量非结构化数据,比如某个某个字段其实是一个大文本字段。

InfiniSynapse 对两类数据分别做了映射,docs 数据映射到知识库,data 类的数据放在数据源。

如前所述,在实际场景里,我们可能希望从知识库获取一个小的二维表格,然后和数据集里的实际数据做关联分析。 InfiniSynapse 支持这种融汇贯通。我们一个一个来。

知识库里的表格数据单独使用

先创建个知识库:

然后上传PDF文档:

文档里有这样的表格:

现在,可以直接在问了:

系统就会从知识库获取信息,注册成表,然后做计算:

注意,这里我们的是通过SQL做计算的,而不是AI自己做的计算,所以准确度有保障,绕过AI不太会做计算的问题。

把PDF里的表格和Excel/业务数据联合分析

现在就到了今天的重点,我如何把 PDF 里的表格和csv里的数据做关联分析呢?创建数据源:

然后 RAG 关联那,选择我们前面建的知识库。接着上传数据:

在智能问答页面添加数据源:

然后询问问题。这里,我们希望把知识库里的月度数据和csv里的数据做一个对比验证。最后执行结果如下:

在这里,InfiniSynapse 汇报知识库里的小表格注册成一张表:

然后和csv的数据集做关联分析。

总结

InfiniSynapse 可以把藏匿在文档中的小二维表格和实际的业务结构化数据做联合分析,实现了一种真正意义的"数据挖掘",极大的扩大了数据的提取质量。

想查看文章的最新版本,可以点击原文链接。

相关推荐
承缘丶42 分钟前
Excel字段清单转各类数据库建表语句的工具(开箱即用)
数据库·excel·excel转数据库建表语句
TextIn智能文档云平台17 小时前
PDF格式转化,哪款软件的准确率更高?
人工智能·pdf
帧栈17 小时前
开发避坑指南(73):itext7 pdf表单字体加粗解决方案
java·pdf
Evan芙18 小时前
用fping编写脚本扫描10.0.0.0/24网段在线主机
linux·运维·网络·excel
裤裤兔19 小时前
如何搜索多个PDF文件中的关键字?
pdf
TextIn智能文档云平台21 小时前
PDF提取文字全是乱码怎么解决?
pdf
SamDeepThinking1 天前
基于CompletableFuture的主子任务并行处理架构实战:多渠道账单并发导入性能提升5倍的技术方案
java·后端·excel
SamDeepThinking1 天前
88MB Excel文件导致系统崩溃?看我如何将内存占用降低
java·excel
伟贤AI之路1 天前
原创分享:Markdown 转 Word 工具,一键导出Word/PDF文档
pdf·word·markdown·markdown转