EasyExcel导出数据量大导致内存溢出

一次性读入过多数据,如果内存不够大就会导致内存溢出,所以将数据分批处理,最后在EasyExcel导出的时候再汇总导出。至于接口耗时问题,就需要根据实际调整批次的最大数量。

java 复制代码
/**
	 * 全量导出工艺工时
	 * @param response 请求信息
	 */
	@Override
	public void exportEngineeringStandardWorkTime(HttpServletResponse response) {
		
		//获取需要导出的数据
		List<MoonStandardWorkTimeExportVO> moonStandardWorkTimeExportVOList = this.baseMapper.selectEngineeringStandardWorkTime();

		// 分批写入数据
		int batchSize = 100000; // 每批写入的数据量
		List<List<MoonStandardWorkTimeExportVO>> batchedData = splitIntoBatches(moonStandardWorkTimeExportVOList, batchSize);


		//导出数据
		try {
			String fileName = "设备工艺工时信息" + LocalDate.now();
			fileName = URLEncoder.encode(fileName, "UTF-8").replaceAll("\\+", "%20");
			response.setHeader("Content-disposition", "attachment;filename*=utf-8''" + fileName + ".xlsx");

			WriteCellStyle contentWriteCellStyle = new WriteCellStyle();
			contentWriteCellStyle.setHorizontalAlignment(HorizontalAlignment.CENTER);

			EasyExcel.write(response.getOutputStream(), MoonStandardWorkTimeExportVO.class)
				.registerWriteHandler(new LongestMatchColumnWidthStyleStrategy())
				.registerWriteHandler(new HorizontalCellStyleStrategy(new WriteCellStyle(), contentWriteCellStyle))
				.sheet("设备工艺工时信息")
				.doWrite(batchedData.stream().flatMap(List::stream).collect(Collectors.toList()));


		} catch (IOException e) {
			throw new RuntimeException(e);
		}
	}

	/**
	 * 将数据列表分割成多个小批量
	 *
	 * @param dataList 数据列表
	 * @param size     每个批次的大小
	 * @return 分割后的数据列表
	 */
	private List<List<MoonStandardWorkTimeExportVO>> splitIntoBatches(List<MoonStandardWorkTimeExportVO> dataList, int size) {
		List<List<MoonStandardWorkTimeExportVO>> batches = new ArrayList<>();
		for (int i = 0; i < dataList.size(); i += size) {
			batches.add(dataList.subList(i, Math.min(i + size, dataList.size())));
		}
		return batches;
	}
相关推荐
计算机小白一个3 分钟前
蓝桥杯 Java B 组之岛屿数量、二叉树路径和(区分DFS与回溯)
java·数据结构·算法·蓝桥杯
孤雪心殇5 分钟前
简单易懂,解析Go语言中的Map
开发语言·数据结构·后端·golang·go
庸俗今天不摸鱼17 分钟前
Canvas进阶-4、边界检测(流光,鼠标拖尾)
开发语言·前端·javascript·计算机外设
菠菠萝宝17 分钟前
【Java八股文】10-数据结构与算法面试篇
java·开发语言·面试·红黑树·跳表·排序·lru
奔跑吧邓邓子20 分钟前
【Python爬虫(36)】深挖多进程爬虫性能优化:从通信到负载均衡
开发语言·爬虫·python·性能优化·负载均衡·多进程
不会Hello World的小苗24 分钟前
Java——链表(LinkedList)
java·开发语言·链表
lsx20240637 分钟前
Perl 面向对象编程指南
开发语言
Allen Bright1 小时前
【Java基础-46.3】Java泛型通配符详解:解锁类型安全的灵活编程
java·开发语言
柃歌1 小时前
【UCB CS 61B SP24】Lecture 7 - Lists 4: Arrays and Lists学习笔记
java·数据结构·笔记·学习·算法
柃歌1 小时前
【UCB CS 61B SP24】Lecture 4 - Lists 2: SLLists学习笔记
java·数据结构·笔记·学习·算法