EasyExcel导出数据量大导致内存溢出

一次性读入过多数据,如果内存不够大就会导致内存溢出,所以将数据分批处理,最后在EasyExcel导出的时候再汇总导出。至于接口耗时问题,就需要根据实际调整批次的最大数量。

java 复制代码
/**
	 * 全量导出工艺工时
	 * @param response 请求信息
	 */
	@Override
	public void exportEngineeringStandardWorkTime(HttpServletResponse response) {
		
		//获取需要导出的数据
		List<MoonStandardWorkTimeExportVO> moonStandardWorkTimeExportVOList = this.baseMapper.selectEngineeringStandardWorkTime();

		// 分批写入数据
		int batchSize = 100000; // 每批写入的数据量
		List<List<MoonStandardWorkTimeExportVO>> batchedData = splitIntoBatches(moonStandardWorkTimeExportVOList, batchSize);


		//导出数据
		try {
			String fileName = "设备工艺工时信息" + LocalDate.now();
			fileName = URLEncoder.encode(fileName, "UTF-8").replaceAll("\\+", "%20");
			response.setHeader("Content-disposition", "attachment;filename*=utf-8''" + fileName + ".xlsx");

			WriteCellStyle contentWriteCellStyle = new WriteCellStyle();
			contentWriteCellStyle.setHorizontalAlignment(HorizontalAlignment.CENTER);

			EasyExcel.write(response.getOutputStream(), MoonStandardWorkTimeExportVO.class)
				.registerWriteHandler(new LongestMatchColumnWidthStyleStrategy())
				.registerWriteHandler(new HorizontalCellStyleStrategy(new WriteCellStyle(), contentWriteCellStyle))
				.sheet("设备工艺工时信息")
				.doWrite(batchedData.stream().flatMap(List::stream).collect(Collectors.toList()));


		} catch (IOException e) {
			throw new RuntimeException(e);
		}
	}

	/**
	 * 将数据列表分割成多个小批量
	 *
	 * @param dataList 数据列表
	 * @param size     每个批次的大小
	 * @return 分割后的数据列表
	 */
	private List<List<MoonStandardWorkTimeExportVO>> splitIntoBatches(List<MoonStandardWorkTimeExportVO> dataList, int size) {
		List<List<MoonStandardWorkTimeExportVO>> batches = new ArrayList<>();
		for (int i = 0; i < dataList.size(); i += size) {
			batches.add(dataList.subList(i, Math.min(i + size, dataList.size())));
		}
		return batches;
	}
相关推荐
聚美智数3 分钟前
常见疾病查询-疾病症状—疾病介绍-疾病大全-疾病治疗查询API接口介绍
android·java·数据库
慧都小妮子4 分钟前
Aspose.Words for JasperReports v26.6 发布,底层Java大升级
java·pdf·报表工具·aspose.words·文档转换·报表导出·jasperreports
白宇横流学长6 分钟前
基于SSM医院电子病历管理系统的设计与实现
java
观远数据7 分钟前
经营闭环的最后一公里:从看见问题到解决问题之间还差什么
java·开发语言·数据库
Java面试题总结12 分钟前
Go 语言大白话入门 6 - 判断与循环
开发语言·后端·golang
qq_4221525714 分钟前
PDF页面管理的几种实用方法:拆分、合并、删除指定页面
java·前端·pdf
m0_6174939422 分钟前
Python OpenCV 孔洞检测与缺陷分析详解与实战
开发语言·python·opencv
hsg771 小时前
简述:Rust、GeoRust、自主研发GIS平台
开发语言·后端·rust
承渊政道1 小时前
飞算Java炫技赛:Java×Unity数字孪生园区平台的从零落地记录
java·开发语言·unity·技术分享·vibe coding·飞算javaai·飞算java ai炫技赛
wdfk_prog7 小时前
嵌入式面试真题第 10 题:高优化等级下共享状态可见性、内存模型与系统级同步设计
java·linux·开发语言·面试·职场和发展·架构·c