AI那些趣事系列121:智能问数场景中使用ClickHouse处理离线3G大文件之前在做智能问数智能体项目,输入是用户的问题和各类不同的数据源,这个数据源可能是JDBC这一类(包括PostGreSql、Mysql、Oracle、SQLServer)等,利用大模型的能力来生成SQL语句进行查询获得相关数据,输出就是用户问题对应的SQL语句、执行SQL语句查询的结果还有对应的推荐的图表。之前接触的数据源主要是JDBC这一类数据源,现在有个新的需求是支持2-3G离线CSV大文件。这种和之前的数据源有点不一样