NPOI 导出列太多或者数据太多爆内存

近期.net mvc 开发的项目运行一段时间的项目,突然用户反馈导出数据出现500错误。后面看到日志是内存爆了。我是使用NPOI 组件来进行导出,服务器也有8G内存,之前一直好好的。然后发现导出的execl数据才几万,列大概有2000多列,怎么这么容易爆。

可惜没有办法客户不想加配置,那就只能把数据网硬盘里面搞了。因为从数据库抓出来的数据需要多很多逻辑处理,所以没有办法直接从数据库直接导出到文件。

原本想过使用多个文件最后合并的方式,但是我比较懒不想搞,所以就查了一下 NPOI是支持硬盘存储临时数据的。

好了,下面是代码:

//---------------------------------------创建下载文档---------------------------------------

static IWorkbook workbook = null;

static string NewfileName;

//allen add 20240616使用SXSSFWorkbook方法,这个是放入硬盘的临时文件

public static string CreatModelToExcel1(int columns, DataTable data, string sheetName, bool isColumnWritten, string fileName)

{

fileName = System.AppDomain.CurrentDomain.BaseDirectory + "DownExcel/" + fileName;

NewfileName = System.AppDomain.CurrentDomain.BaseDirectory + "DownExcel/" + fileName;

if (data == null)

{

throw new ArgumentNullException("data");

}

if (string.IsNullOrEmpty(sheetName))

{

throw new ArgumentNullException(sheetName);

}

if (string.IsNullOrEmpty(fileName))

{

throw new ArgumentNullException(fileName);

}

//IWorkbook workbook = null;

if (fileName.IndexOf(".xlsx", StringComparison.Ordinal) > 0)

{

//workbook = new XSSFWorkbook();

workbook = new SXSSFWorkbook();//allen 0617

//workbook = new HSSFWorkbook();

}

else if (fileName.IndexOf(".xls", StringComparison.Ordinal) > 0)

{

workbook = new HSSFWorkbook();

}

FileStream fs = null;

try

{

using (fs = new FileStream(fileName, FileMode.OpenOrCreate, FileAccess.ReadWrite, FileShare.ReadWrite))

{

SXSSFSheet sheet; //allen 0617

if (workbook != null)

{

sheet =(SXSSFSheet)workbook.CreateSheet(sheetName);//allen 0617

}

else

{

return "";//返回文件为空

}

int j;

int count;

//写入DataTable的列名,写入单元格中

if (isColumnWritten)

{

var row = sheet.CreateRow(0);

int ci = 0;

for (j = 1; j < data.Columns.Count; ++j)

{

#region 分割数据添加单元格

//处理数据

}

count = 1;

//设置自适应宽度 //2022-10-24

for (int columnNum = 0; columnNum <= data.Columns.Count; columnNum++)

{

sheet.TrackAllColumnsForAutoSizing();

sheet.AutoSizeColumn(columnNum);

int columnWidth = sheet.GetColumnWidth(columnNum) / 256;

for (int rowIndex = 1; rowIndex <= sheet.LastRowNum; rowIndex++)

{

IRow currentRow = sheet.GetRow(rowIndex);

ICell cell = row.GetCell(columnNum);

int contextLength = Encoding.UTF8.GetBytes(cell.ToString()).Length;//获取当前单元格的内容宽度

columnWidth = columnWidth < contextLength ? contextLength : columnWidth;

}

sheet.SetColumnWidth(columnNum, columnWidth * 280);

}

}

else

{

count = 0;

}

//遍历循环datatable具体数据项

int i;

for (i = 0; i < data.Rows.Count; ++i)

{

}

++count;

//每3000次和最后一次调用保存的方法---没用了

//if (count % 3000 == 0 || count == data.Rows.Count)

//{

// SaveExcel();

// initWorkBook();

// sheet = workbook.GetSheet(sheetName);

//}

}

//将文件流写入到excel

workbook.Write(fs);

workbook.Close();

((SXSSFWorkbook)workbook).Dispose();

//返回文件名外面直接访问下载

return fileName;

}

}

catch (IOException ioex)

{

throw new IOException(ioex.Message);

}

catch (Exception ex)

{

throw new Exception(ex.Message);

}

finally

{

if (fs != null)

{

fs.Close();

}

}

}

相关推荐
水果里面有苹果3 小时前
20-C#构造函数--虚方法
java·前端·c#
[纳川]6 小时前
把word中表格转成excle文件
开发语言·c#·word
lph19727 小时前
快速分页wpf
c#
咖丨喱7 小时前
【Action帧简要分析】
服务器·数据库·asp.net
试行8 小时前
C#System.Runtime.InteropServices.ExternalException (0x80004005): GDI+ 中发生一般性错误。
c#
每日出拳老爷子12 小时前
[C#] 使用TextBox换行失败的原因与解决方案:换用RichTextBox的实战经验
开发语言·c#
程序猿多布20 小时前
C# 值拷贝、引用拷贝、浅拷贝、深拷贝
c#
阿蒙Amon21 小时前
C#随机数生成全面详解:从基础到高级应用
服务器·网络·c#
开开心心_Every21 小时前
便捷的电脑自动关机辅助工具
开发语言·人工智能·pdf·c#·电脑·音视频·sublime text