当前位置: 首页 > news >正文

网站建设公司运营经验做机械设计的网站

网站建设公司运营经验,做机械设计的网站,武胜建设局网站,北京网站排行优化前:优化大量数据导出到Excel的内存消耗_大文件异步导出 内存占用高-CSDN博客 写Excel文件报错:Invalid row number (1048576) outside allowable range (0..1048575) 写入Excel时遇到IllegalArgumentException,原因是超出允许的最大行数…

优化前:优化大量数据导出到Excel的内存消耗_大文件异步导出 内存占用高-CSDN博客

写Excel文件报错:Invalid row number (1048576) outside allowable range (0..1048575)

写入Excel时遇到`IllegalArgumentException`,原因是超出允许的最大行数。文章提供了解决方案,即使用多个sheet并将数据分批写入以避免此问题。

数据导出优化:如果数据超出Excel单表上限,Excel单表最多可以存储1048576条数据(1024的平方,2的20次方),如果数据超出Excel单表上限,则进行分表。

 public void writeExcel(OutputStream os, String sheetName, Map<String, String> header, List<Map<String, Object>> datas) {logger.info("导入数据到excel==========> 开始");long startTime = System.currentTimeMillis();  // 记录开始时间int rowAccessWindowSize = 100;  // 设置适当的行访问窗口大小SXSSFWorkbook wb = new SXSSFWorkbook(rowAccessWindowSize);wb.setCompressTempFiles(true);  // 启用临时文件压缩以提高性能int sheetIndex = 0; // 新增变量,用于追踪当前的sheet索引int maxRowsPerSheet = 1048576; // 单个sheet的最大行数int totalRecords = ObjectKit.isNotEmpty(datas) ? datas.size() : 0;  // 总共导出记录数logger.info("即将导出记录总数: " + totalRecords);Map<String, CellStyle> cellStyles = initStyles(wb); // 优化:样式创建移到循环外部while (!datas.isEmpty()) {String currentSheetName = sheetName + "_" + sheetIndex;Sheet sheet = wb.createSheet(currentSheetName);int rowNum = 0;Row row = sheet.createRow(rowNum);
//            Map<String, CellStyle> cellStyles = initStyles(wb);int cellNum = 0;// 写入表头for (Map.Entry<String, String> entry : header.entrySet()) {String fieldDesc = entry.getValue();Cell cell = row.createCell(cellNum);cell.setCellValue(fieldDesc);logger.info("导入数据到excel==========> 表头" + entry.getKey());cellNum++;}// 计算本次循环需要处理的数据量int recordsToProcess = Math.min(maxRowsPerSheet - 1, datas.size()); // 减去1是因为第一行是表头for (int i = 0; i < recordsToProcess; i++) {Map<String, Object> map = datas.remove(0); // 从列表头部移除已处理的数据rowNum++;row = sheet.createRow(rowNum);cellNum = 0;for (Map.Entry<String, String> entry : header.entrySet()) {String fieldName = entry.getKey();Object data = map.get(fieldName.toUpperCase());String dataString = null == data ? "" : data.toString();if (data instanceof BigDecimal) {Cell cell = row.createCell(cellNum);cell.setCellValue(((BigDecimal) data).toPlainString());cell.setCellStyle(cellStyles.get("Number"));} else {if (data instanceof Date || data instanceof Timestamp) {if (data.toString().contains(".")) {dataString = null == data ? "" : data.toString().substring(0, data.toString().indexOf("."));} else {dataString = null == data ? "" : data.toString();}}row.createCell(cellNum).setCellValue(null == data ? "" : dataString);}cellNum++;}// 当前已导出记录数及进度if(rowNum % 10000 == 0){logger.info("当前sheet已导出记录数: " + rowNum + ", 进度: " + ((float) rowNum / recordsToProcess) * 100 + "%");}}sheetIndex++; // 切换到下一个sheet}logger.info("导入数据到excel==========> 结束");long endTime = System.currentTimeMillis();  // 记录结束时间long elapsedTime = endTime - startTime;  // 计算耗时时间logger.info("总共导出记录数: " + totalRecords);long elapsedTimeInSeconds = elapsedTime / 1000;  // 将毫秒转换为秒logger.info("耗时时间: " + elapsedTimeInSeconds + " 秒 " );try {wb.write(os);} catch (IOException e) {throw new ImpException(ImpError.APP_ERR_20_04_10, e);} finally {try {if (null != wb) {wb.close();}} catch (IOException e) {logger.error(e.getMessage(), e);}}}

这一优化措施确保了当数据量超过Excel单表上限时,数据能够被有效地分散到多个工作表中,从而支持更大规模的数据导出。
目前测试了导出三百万数据正常则进行分表。

http://www.yayakq.cn/news/493959/

相关文章:

  • 农产品网站建设重庆公司名字
  • 建设网站的目标和作用芜湖建设网站
  • 学做网站好学吗网页制作三巨头
  • 东莞ppt免费模板下载网站怎么下载1688上的视频
  • 萝岗公司网站建设哈密建设厅网站
  • 西安易码建站淄博做网站小程序的公司
  • 西安建设局网站首页wordpress 七牛 上传
  • 普通网站报价多少谷歌play
  • 织梦手机网站怎么修改密码网站详情页用什么软件做
  • 如何用代码制作网站互联网保险业务
  • 在哪里可以做海外淘宝网站手机网站营销方案
  • 建网站要租服务器吗黄金网站软件免费
  • 图片展示网站南宁怎么做网站
  • 专业做淘宝网站绍兴禹城网页设计
  • python网站建设代码服务器怎么添加网站
  • 最少的钱怎么做网站怎么在百度创建网页
  • 通用网站后台管理 asp.net 源码网页qq登录入口首页
  • 学生网站模板广州网站推广自助
  • 衡水稳定的网络建站网站源码免费资源网
  • 网站建设维护网页设计成都手机建站
  • 厦门网站建设a旅游网站建设目标网站分类
  • 自己做h5制作开发广告开户南京seo
  • 手机版网站嵌入代码手机兼职赚钱正规平台
  • 章丘建设网站金融网站框架模板
  • 麦吉太原网站建设丽怎么代理上海十大工业设计公司
  • 创业项目的网站微信官网入口手机版
  • 网站业务Wordpress博客怎么盈利
  • 湖北专业网站建设耗材外包服务合同
  • 南通市经济开发区建设局网站设计非常漂亮的网站
  • 网站建设制作公司哪家国内永久免费的crm系统软件