导出excel功能(解决大数据量问题)

时间:2021-10-11 08:13:12


目前我们做的系统,导出excel功能都存在一个问题,如果数据量一大(比如上万条以上的记录),如果用传统的方式导出excel速度都很慢,甚至最终导致内存益出,最终死机;(请大伙最好都确认一下各自负责的系统存在的问题)

例如:三明移动公司的积分系统,因需求所需,客户如果要导出20多万条记录的话,系统速度都很慢,最终导致内存益出死机;原本以为是频繁把数据放在集合的原因,可是我又有分页觉得不是主要原因,经与黄振华的商讨和测试,发现主要是因为频繁把数据插入到excel的原因,数据量一大就会占用系统很多内存;所以我们最好不要用java提供的操作excel的api(HSSFWorkbook workbook = new HSSFWorkbook();...)

这里推荐往文本文件直接插入记录的方式(速度快,占内存也少),然后用\t割开代表一列,到时候产生的文件,直接用excel打开就可.具体如下:
String path="c:/test.xls";//数据存放的位置
BufferedWriter buff = new BufferedWriter(new FileWriter(path));//生成文件
//插入标题
buff.write("部门名称\t用户\t电话");//代表3列
buff.write("\r\n");//换行
//插入5万条记录
for (int i = 0; i < 50000; i++) {
   buff
     .write("短信营业厅\t小吴\t123456");
   buff.write("\r\n");
  }
buff.close(); //关闭文件操作

备注:由于打开excel的时候一个sheet只显示6.5万左右的记录,所以记录超过5,6万的时候,推荐生成多个文件,一个文件5万行左右就好