超好用的【通用Excel导入功能】

2024-04-16 15:32

本文主要是介绍超好用的【通用Excel导入功能】,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

文章目录

    • 一、需求
      • 1-1、下载模板(excel)
      • 1-2、数据填充并导入
      • 1-3、导入结果展示
      • 1-4、数据校验规则
    • 二、方案思路
    • 三、代码使用
      • 3-1、新建一个VO,比如你导入的字段是 `name`、`age`、`gender` 那么你的实体应该如下:
      • 3-2、新增一个ImportExcel接口的实现类,实现里面的 check 方法(这个接口下面讲解)
      • 3-3、调用
    • 四、代码思路讲解
      • 4-1、准备
      • 4-2、importCheck方法
      • 4-3、check 方法
      • 4-4、其它

之前写过一个简单的Excel导入功能,大家可以先看这个: https://www.bilibili.com/video/BV1kf4y1i761?p=5

最近接到一个需求,做一个Excel的批量导入功能,具体的步骤如下:


一、需求

1-1、下载模板(excel)

姓名(2-4个字符)年纪(1-150)性别(男/女)

1-2、数据填充并导入

姓名(2-4个字符)年纪(1-150)性别(男/女)
张三丰20
小道仙9724
慕容晓晓18女性

1-3、导入结果展示

在这里插入图片描述


1-4、数据校验规则

  • 姓名不能为空且只能是2-4个字符
  • 年纪不能为空且只能是1-150
  • 性别不能为空且只能是男/女
  • 导入的数据不能有两个同名,如果存在则都导入失败
  • 数据库如果有同名的人也不可以导入

二、方案思路

使用上面的Excel导入功能,把Excel模板数据解析成对应的 List<Map<String,Object>> 数据。

使用数据把对应的数据格式化成对应的实体,再依次循环按照条件去校验对应的数据。

其实除了导入数据校验规则之外,其它都是通用的,比如返回字段、解析excel并封装成bean,对异常数据进行处理等。


三、代码使用

3-1、新建一个VO,比如你导入的字段是 nameagegender 那么你的实体应该如下:

注:省略了 get 、set 、和空参构造方法

public class TestImportExcelVo {/*** 表头*/public final static String[] HEADER = {"name","age","gender"};/*** 姓名*/private String name;/*** 年纪*/private String age;/*** 性别*/private String gender;
}

可以看到唯一不同的就是多了一个常量HEADER,它的规则就是导入模板字段顺序


3-2、新增一个ImportExcel接口的实现类,实现里面的 check 方法(这个接口下面讲解)

@Service
public class TestImportExcelImpl implements ImportExcel<TestImportExcelVo> {@Overridepublic String[] check(ImportItem importItem, List<TestImportExcelVo> successResult, List<ImportItem> errorResult) {return new String[]{"1",""};}
}

3-3、调用

@RestController
public class ImportExcelController {@Autowiredpublic TestImportExcelImpl testImportExcelImpl;@PostMapping("/importExcel")public Object importExcel(MultipartFile file) {return testImportExcelImpl.importCheck(file, TestImportExcelVo.HEADER, TestImportExcelVo.class);}
}

四、代码思路讲解

其实就是看接口 ImportExcel 里面的两个方法。

4-1、准备

这里使用了两个bean如下(去掉了get/set)

/*** 导出错误结果集实体bean** 因为错误结果集需要多一个原因字段** @author 小道仙* @date 2021年8月4日*/
public class ImportItem<T> {private String errorReason;public T t;
}
/*** 导入Excel返回结果实体** @author 小道仙* @date 2021-08-04*/
public class ImportResultVo<T> {/*** 总行数*/private Integer totalRows;/*** 错误行数*/private Integer errorRows;/*** 成功行数*/private Integer successRows;/*** 失败结果集*/private List<T> errorResults;/*** 成功结果集*/private List<T> successResults;public ImportResultVo() {}public ImportResultVo(Integer totalRows,Integer errorRows,Integer successRows,List<T> errorResults,List<T> successResults) {this.totalRows = totalRows;this.errorRows = errorRows;this.successRows = successRows;this.errorResults =errorResults;this.successResults = successResults;}
}

4-2、importCheck方法

这是一个默认方法完成一些通用的功能,如:excel解析、实体bean封装等

default ImportResultVo importCheck(MultipartFile file, String[] header,Class clazz){// 从excel里面解析出来数据List<Map<String, Object>> maps;try {maps = ExcelUtils.importExcel(file, header);}catch (Exception e){logger.error("解析失败,数据模板不对",e);throw new RuntimeException("解析失败,数据模板不对");}if (CollectionUtils.isEmpty(maps)){return new ImportResultVo(0,0,0,null,null);}// 对数据进行逐步的验证int totalRows = 0;int successRows = 0;int errorRows = 0;List<T> successResult = new ArrayList<>(50);List<ImportItem> errorResult = new ArrayList<>(50);for (Map map : maps) {ImportItem<T> importItem = new ImportItem();totalRows ++;try {Object tmpT = JsonUtils.objectToPojo(map, clazz);importItem.setT((T)tmpT);}catch (Exception e) {errorRows ++;logger.error("bean转换失败", e);continue;}String[] check = check(importItem, successResult, errorResult);if ("1".equals(check[0])) {successRows ++;successResult.add(importItem.getT());}else if ("2".equals(check[0])) {errorRows ++;importItem.setErrorReason(check[1]);errorResult.add(importItem);}else if ("3".equals(check[0])){successRows --;errorRows ++;importItem.setErrorReason(check[1]);errorResult.add(importItem);}}return new ImportResultVo(totalRows,errorRows,successRows,errorResult,successResult);
}

4-3、check 方法

这是一个接口方法,需要自己去实现具体的校验规则

/**** @param t 当前需要校验的实体bean* @param successResult 已校验的正确结果集* @param errorResult 已校验错误的结果集* @return 第一个参数是校验结果,第二个是失败的原因*      1  成功*      2  正常失败(比如字段为空,字段格式不对,和数据库冲突等)*      3  异常失败(和之前已经成功的数据冲突,比如唯一性字段已经存在了)*      注:【异常失败】的时候,你需要在check方法里面去删除掉之前成功的数据,并把之前的数据插入到 errorResult 里面*/
String[] check(ImportItem t, List<T> successResult, List<ImportItem> errorResult);

4-4、其它

这里的excel导出工具类之前已经说过了,这里就简单的复制一下吧。

/*** Excel 导入* @param file 文件* @param keys 数据顺序*/
public static  List<Map<String, Object>>  importExcel(MultipartFile file, String[] keys) throws Exception{Workbook wb = null;String fileName = file.getOriginalFilename();if (fileName.endsWith("xls")) {POIFSFileSystem pois = new POIFSFileSystem(file.getInputStream());wb = new HSSFWorkbook(pois);} else if (fileName.endsWith("xlsx")) {wb = new XSSFWorkbook(file.getInputStream());}Sheet sheet = wb.getSheetAt(0);int rowCount = sheet.getPhysicalNumberOfRows();if (sheet.getRow( 1).getPhysicalNumberOfCells() != keys.length){throw new RuntimeException("导入的Excel和模板的列不匹配");}List<Map<String,Object>> result = new ArrayList<>();for (int i = 0; i < rowCount - 1; i++) {Row row = sheet.getRow(i + 1);Map<String,Object> tmp = new HashMap<>();for (int j = 0;j < keys.length; j++){Cell cell = row.getCell(j);if(cell == null) {tmp.put(keys[j], null);}else {// 把类型转行Springcell.setCellType(CellType.STRING);tmp.put(keys[j], cell.getStringCellValue());}}result.add(tmp);}return result;
}

视频看讲解地址:https://www.bilibili.com/video/BV1kf4y1i761

关注微信公众号回复:xdxFrameSimple 获取源码。

在这里插入图片描述

这篇关于超好用的【通用Excel导入功能】的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/909179

相关文章

Python使用FastAPI实现大文件分片上传与断点续传功能

《Python使用FastAPI实现大文件分片上传与断点续传功能》大文件直传常遇到超时、网络抖动失败、失败后只能重传的问题,分片上传+断点续传可以把大文件拆成若干小块逐个上传,并在中断后从已完成分片继... 目录一、接口设计二、服务端实现(FastAPI)2.1 运行环境2.2 目录结构建议2.3 serv

C#实现千万数据秒级导入的代码

《C#实现千万数据秒级导入的代码》在实际开发中excel导入很常见,现代社会中很容易遇到大数据处理业务,所以本文我就给大家分享一下千万数据秒级导入怎么实现,文中有详细的代码示例供大家参考,需要的朋友可... 目录前言一、数据存储二、处理逻辑优化前代码处理逻辑优化后的代码总结前言在实际开发中excel导入很

Python实现Excel批量样式修改器(附完整代码)

《Python实现Excel批量样式修改器(附完整代码)》这篇文章主要为大家详细介绍了如何使用Python实现一个Excel批量样式修改器,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一... 目录前言功能特性核心功能界面特性系统要求安装说明使用指南基本操作流程高级功能技术实现核心技术栈关键函

oracle 11g导入\导出(expdp impdp)之导入过程

《oracle11g导入导出(expdpimpdp)之导入过程》导出需使用SEC.DMP格式,无分号;建立expdir目录(E:/exp)并确保存在;导入在cmd下执行,需sys用户权限;若需修... 目录准备文件导入(impdp)1、建立directory2、导入语句 3、更改密码总结上一个环节,我们讲了

Python实现批量CSV转Excel的高性能处理方案

《Python实现批量CSV转Excel的高性能处理方案》在日常办公中,我们经常需要将CSV格式的数据转换为Excel文件,本文将介绍一个基于Python的高性能解决方案,感兴趣的小伙伴可以跟随小编一... 目录一、场景需求二、技术方案三、核心代码四、批量处理方案五、性能优化六、使用示例完整代码七、小结一、

Debian 13升级后网络转发等功能异常怎么办? 并非错误而是管理机制变更

《Debian13升级后网络转发等功能异常怎么办?并非错误而是管理机制变更》很多朋友反馈,更新到Debian13后网络转发等功能异常,这并非BUG而是Debian13Trixie调整... 日前 Debian 13 Trixie 发布后已经有众多网友升级到新版本,只不过升级后发现某些功能存在异常,例如网络转

基于Java和FFmpeg实现视频压缩和剪辑功能

《基于Java和FFmpeg实现视频压缩和剪辑功能》在视频处理开发中,压缩和剪辑是常见的需求,本文将介绍如何使用Java结合FFmpeg实现视频压缩和剪辑功能,同时去除数据库操作,仅专注于视频处理,需... 目录引言1. 环境准备1.1 项目依赖1.2 安装 FFmpeg2. 视频压缩功能实现2.1 主要功

使用Python实现无损放大图片功能

《使用Python实现无损放大图片功能》本文介绍了如何使用Python的Pillow库进行无损图片放大,区分了JPEG和PNG格式在放大过程中的特点,并给出了示例代码,JPEG格式可能受压缩影响,需先... 目录一、什么是无损放大?二、实现方法步骤1:读取图片步骤2:无损放大图片步骤3:保存图片三、示php

深度解析Python yfinance的核心功能和高级用法

《深度解析Pythonyfinance的核心功能和高级用法》yfinance是一个功能强大且易于使用的Python库,用于从YahooFinance获取金融数据,本教程将深入探讨yfinance的核... 目录yfinance 深度解析教程 (python)1. 简介与安装1.1 什么是 yfinance?

Python脚本轻松实现检测麦克风功能

《Python脚本轻松实现检测麦克风功能》在进行音频处理或开发需要使用麦克风的应用程序时,确保麦克风功能正常是非常重要的,本文将介绍一个简单的Python脚本,能够帮助我们检测本地麦克风的功能,需要的... 目录轻松检测麦克风功能脚本介绍一、python环境准备二、代码解析三、使用方法四、知识扩展轻松检测麦