阿桂天山的小工具:我将16个Excel文件中31万多条数据拆分成318个文件

1.话不多说,先上图看效果

2.技术说明及实用源码

2.1)python+flask+pandas , 由于我的开发环境版本问题,为了能读xls,xlsx,但又不想升级,只能通过xlrd 1.2.0读取xls,xlsx文件再转换成dict字典格式,再通过 data = pd.DataFrame(dict_data)实现类型转换

2.2)实用代码,保证不丢任何一行数据,亲测验证,绝对好用

复制代码
            data = pd.DataFrame(dict_data)

            row_num, column_num = data.shape  # 数据共有多少行,多少列
            print('the sample number is %s and the column number is %s' % (row_num, column_num))
            # 1000行分割
            for i in range(0, (row_num // 1001)+1):
                save_data = data.iloc[i * 1000:(i + 1) * 1000, :]  # 每隔1000循环一次
                split_num = split_num+1
                splitfilename = os.path.join(config.SPLIT_FOLDERFILES, 'split_' + str(split_num) + '.xls')
                print("split file name:",splitfilename)
                save_data.to_excel(splitfilename, sheet_name='Sheet1',  index=False) 
                filenames = filenames + 'split_' + str(split_num) + '.xls '
            filenames = filenames + ';'

2.3)其实重点就三行代码

1000行分割

for i in range(0, (row_num // 1001)+1):
save_data = data.iloc[i * 1000:(i + 1) * 1000, :] # 每隔1000循环一次

save_data.to_excel(splitfilename, sheet_name='Sheet1', index=False)

如果对你有帮助,给个赞吧

相关推荐
Jackiejin5267 小时前
WPS表格选择性粘贴快捷键怎么使用?WPS如何给表格某一行都加上指定数字?
数据分析·excel·wps
办公解码器8 小时前
Excel怎么将八位数字设置为日期格式?
excel
gis98 小时前
批量地址解析坐标,支持WPS、EXCEL软件,支持导出SHP、GEOJSON、DXF等文件格式
excel·wps
赵庆明老师9 小时前
ASP.NET Core读取Excel文件
excel
luyun02020212 小时前
流批了,pdf批量转excel
windows·pdf·excel·figma
老师可可12 小时前
成绩发布工具使用方法,附成绩分析教程
学习·信息可视化·小程序·excel·学习方法
SamDeepThinking17 小时前
处理大型excel文件的技术选型
excel
技术钱1 天前
vue3前端解析excel文件
前端·vue.js·excel
VBAMatrix1 天前
数据重构!按一级科目拆分序时账,批量生成明细账
excel·财务·审计·会计师事务所·tb工具箱·明细账
缺点内向1 天前
Java 使用 Spire.XLS 库合并 Excel 文件实践
java·开发语言·excel