ruoyi的导出问题小记
项目场景:
新加入一个项目使用的是若依(ruoyi)框架,整合的是apache poi。
问题描述:
在导出一个表5000+数据量的表的时候居然只能导出正好4000条,而且内测的时候一导出数据量稍微大点的数据,服务器就崩。
原因分析:
后来本地启动后报一到4000条就报cellStyel超过限制的错。我找到本框架的导出逻辑代码。
下面展示一些 内联代码片
。
/**
* 对list数据源将其里面的数据导入到excel表单
*
* @return 结果
*/
public AjaxResult exportExcel()
{
OutputStream out = null;
try
{
// 限制导出100000条
if (list != null && list.size() > 100000) {
list = list.subList(0, 100000);
}
// 取出一共有多少个sheet.
double sheetNo = Math.ceil(list.size() / sheetSize);
for (int index = 0; index <= sheetNo; index++)
{
createSheet(sheetNo, index);
// 产生一行
Row row = sheet.createRow(0);
int column = 0;
// 写入各个字段的列头名称
for (Object[] os : fields)
{
Excel excel = (Excel) os[1];
this.createCell(excel, row, column++);
}
sheet.createFreezePane( 0, 1, 0, 0 );//列数,行数,右边区域首列序号,下边区域的首行序号
if (Type.EXPORT.equals(type))
{
fillExcelData(index, row);
addStatisticsRow();
}
}
String filename = encodingFilename(sheetName);
out = new FileOutputStream(getAbsoluteFile(filename));
wb.write(out);
return AjaxResult.success(filename);
}
catch (Exception e)
{
log.error("导出Excel异常{}", e.getMessage());
throw new CustomException("导出Excel失败,请联系网站管理员!");
}
finally
{
if (wb != null)
{
try
{
wb.close();
}
catch (IOException e1)
{
e1.printStackTrace();
}
}
if (out != null)
{
try
{
out.close();
}
catch (IOException e1)
{
e1.printStackTrace();
}
}
}
}
------------------------------------------------------
/**
* 填充excel数据
*
* @param index 序号
* @param row 单元格行
*/
public void fillExcelData(int index, Row row)
{
int startNo = index * sheetSize;
int endNo = Math.min(startNo + sheetSize, list.size());
for (int i = startNo; i < endNo; i++)
{
row = sheet.createRow(i + 1 - startNo);
// 得到导出对象.
T vo = (T) list.get(i);
int column = 0;
for (Object[] os : fields)
{
Field field = (Field) os[0];
Excel excel = (Excel) os[1];
// 设置实体类私有属性可访问
field.setAccessible(true);
this.addCell(excel, row, vo, field, column++);
}
}
}
--------------------------------------------------------
/**
* 添加单元格
*/
public Cell addCell(Excel attr, Row row, T vo, Field field, int column)
{
Cell cell = null;
try
{
// 设置行高
row.setHeight((short) (attr.height() * 20));
// 根据Excel中设置情况决定是否导出,有些情况需要保持为空,希望用户填写这一列.
if (attr.isExport())
{
// 创建cell
cell = row.createCell(column);
int align = attr.align().value();
cell.setCellStyle(styles.get("data" + (align >= 1 && align <= 3 ? align : "")));
// 用于读取对象中的属性
Object value = getTargetValue(vo, field, attr);
String dateFormat = attr.dateFormat();
String readConverterExp = attr.readConverterExp();
String separator = attr.separator();
String dictType = attr.dictType();
//样式(日期)
CellStyle dateCellStyle = getNewCellStyle();
dateCellStyle.setDataFormat(wb.createDataFormat().getFormat(dateFormat));
//样式(金额)
CellStyle doubleCellStyle = getNewCellStyle();
doubleCellStyle.setDataFormat(wb.createDataFormat().getFormat(getBigDecimalFormatStr(attr)));
if (StringUtils.isNotEmpty(dateFormat) && StringUtils.isNotNull(value))
{
//日期格式
cell.setCellValue(DateUtils.parseDate(DateUtils.parseDateToStr((Date) value,dateFormat)));
cell.setCellStyle(dateCellStyle);
}
else if (StringUtils.isNotEmpty(readConverterExp) && StringUtils.isNotNull(value))
{ //解析导出值
cell.setCellValue(convertByExp(Convert.toStr(value), readConverterExp, separator));
}
else if (StringUtils.isNotEmpty(dictType) && StringUtils.isNotNull(value))
{
//字典
cell.setCellValue(convertDictByExp(Convert.toStr(value), dictType, separator));
}
else if (value instanceof BigDecimal && -1 != attr.scale())
{ //BigDecimal
cell.setCellStyle(doubleCellStyle);
cell.setCellValue(Double.parseDouble(((BigDecimal) value).setScale(attr.scale(), attr.roundingMode()).toString()));
}
else
{
// 设置列类型
setCellVo(value, attr, cell);
}
addStatisticsData(column, Convert.toStr(value), attr);
}
}
catch (Exception e)
{
log.error("导出Excel失败{}", e);
}
return cell;
}
上面主要的三个方法都贴出来了,在第一个方法里面遍历插入数据,可以看到在第三个方法里面设置单元格格式的时候用getNewCellStyle();方法创了两个style 但一个Excal sheet页只能有64000个cellStyle所以会报错。报错又被处理掉了,导致前台看不到错误导出4000条,而实际上后台还是在一直报错。最后导致系统崩。正好是4000是因为 需要导出的类正好是8个导出字段,然后他是每个字段都遍历到塞值的时候都会创两个cellStyle最后就是2*8*4000正好64000个,后面实际上cell是创好了的。但是值塞不进去一直报错。
解决方案:
最后是整合了阿里的easyExcal做的导出。用的Converter做的导出时字典转换。