如何设计一个通用的 Excel 导入导出功能?

以JSON配置的方式去实现通用性和动态调整,当然,这个通用仍然存在一定的局限性,每个项目的代码风格都不同。

想要写出一个适合所有项目的通用性模块并不容易,这里的通用局限于其所在项目,所以该功能代码如果不适用于自己的项目,希望可以以此为参考,稍作修改。

那么现在来分析一下,我们会需要哪些JSON配置项。

导出

基础配置项

先从最简单的导出开始,被导出数据应该支持通过业务层查出,如:Service.search(param),这是大前提,然后为了支持显示导出进度,业务层还需要提供数量查询方法,如:Service.count(param),否则无法实现导出进度。

最后导出文件名也可以定制,如:filename

由上可以得出配置项:

  • serviceClazz: 业务类路径,如:com.cc.service.UserService,必填

  • methodName: 查询方法名,如:listByCondition,必填

  • countMethodName: 数量查询方法名,可填,用于支持导出进度

  • filename: 导出文件名

  • searchParams: 查询参数,数组类型,字典元素。用数组是为了支持查询方法需要传多参数的情况

至于查询方法的参数类,不需要填,因为我们可以通过反射去获取到该方法所需要传入的参数类型(注意,以下贴出的是关键代码,仅作参考理解):

Class<?> serviceClass = Class.forName(param.getServiceClazz());// param为请求参数类
Method searchMethod = ReflectUtil.findMethodByName(serviceClass, param.getMethodName());// 方法所需要传入的参数列表
Class<?>[] parameterTypes = searchMethod.getParameterTypes();
/*** 通过反射从指定类中获取方法对象*/
public static Method findMethodByName(Class<?> clazz, String name) {Method[] methods = clazz.getMethods();if (StringUtils.isEmpty(name)) {return null;}for (Method method : methods) {if (method.getName().equals(name)) {return method;}}return null;
}

现在我们来想想,导出都会有哪些场景:

  • 列表页的分页查询,可能是当前页数据导出,也可能是所有数据导出,这涉及到分页查询

  • 数据总览页的查询,通常是开发者自定义的复杂连表查询,不需要分页

那么本文针对以上两种情况来实现第一版的通用导出功能。

列表页的分页查询

列表页的数据导出分当前页导出和所有数据导出,假设查询流程是这样的:

  • 接口层接收参数:Controller.search(Param param)

  • 业务层调用查询方法:Service.search(param)

  • 持久层访问数据库:Mapper.search(param)

这种情况很简单,但如果流程是这样的:

  • 接口层接收参数:Controller.search(Param param)

  • 业务层调用查询方法:Service.search(new Condition(param))

  • 持久层访问数据库:Mapper.search(condition)

上面代码中,接口请求参数和持久层参数不一致,在业务层经过了包装,那么这种情况也要兼容处理。

但是如果请求参数在业务层经过了包中包中包,那么就算了。

接着是分页参数,我们用pageNum和pageSize来表示页码和数量字段,类似于:

{"pageNum": 1,"pageSize": 10,"name": "老刘" // 此为查询字段,如查询名字为老刘的数据
}

关于当前页导出和所有数据导出,可以用一个bool来表示:onlyCurrentPage,默认false,即导出时会自动分页查询数据,直到所有数据查询完毕,导出所有数据时分页查询很有必要,能提高性能,避免内存溢出,当onlyCurrentPage为true时,则只导出当前页面数据。

得出需要的配置项为:

  • searchParam: 接口分页请求参数,JSON类型,必填

  • conditionClazz: 条件查询类,也可以认为是包装类,如:com.cc.codition.UserCondition,可填

  • onlyCurrentPage: 仅当前页导出,默认false,可填

数据总览页的查询

数据总览数据没有数量查询方法,即Service.count(xxx),也没有分页查询参数,类似于当前页导出,在也只考虑一层包装类的情况下,没有额外的配置项,上面的已经足够了,要注意的就是代码里面得把分页参数剔除掉。

表头配置

一级表头

模拟一些数据来加深理解,现有一个接口是查询系统用户列表,如:/user/search,返回结果是这样的:

{"code": 0,"msg": "请求成功","data": [{"id": 1,"username": "admin","nickname": "超管","phone": "18818881888","createTime": "2023-06-23 17:16:00"},{"id": 2,"username": "cc","nickname": "管理员","phone": "18818881888","createTime": "2023-06-23 17:16:00"},...]
}

现在贴出EasyExcel的代码:

// 创建excel文件
try (ExcelWriter excelWriter = EasyExcel.write(path).build()) {WriteSheet writeSheet = EasyExcel.writerSheet("sheet索引", "sheet名称").head(getHeader()).build();excelWriter.write(getDataList(), writeSheet);
}
// 模拟表头
private static List<List<String>> getHeader() {List<List<String>> list = new ArrayList<>();list.add(createHead("账号"));list.add(createHead("昵称"));list.add(createHead("联系方式"));list.add(createHead("注册时间"));return list;
}public static List<String> createHead(String... head) {return new ArrayList<>(Arrays.asList(head));
}// 模拟数据
public static List<List<Object>> getDataList() {List<List<Object>> list = new ArrayList<>();list.add(createData("admin", "超管", "18818881888", "2023-06-23 17:16:00"));list.add(createData("cc", "管理员", "18818881888", "2023-06-23 17:16:00"));return list;
}public static List<Object> createData(String... data) {return new ArrayList<>(Arrays.asList(data));
}

然后导出效果是这样的:

图片

现在先别在乎效果图的excel样式,我们后面都会进行动态配置,比如列宽、表头背景色、字体居中等。

上面我们虽然是写死了代码,但聪明的开发者一定懂得将数据库查询来的数据转换成对应的格式,所以这段就跳过了。

现在我们就可以得出基础的表头配置:

"customHeads": [{"fieldName": "username", "fieldNameZh": "账号"},{"fieldName": "nickname","fieldNameZh": "昵称"},{"fieldName": "phone","fieldNameZh": "联系方式"},{"fieldName": "createTime","fieldNameZh": "注册时间"}
]

也就是:

  • fieldName: 属性名,这样可以从返回结果的数据对象里面通过反射找到该属性以及值

  • fieldNameZh: 属性名肯定不适合作为表头名,增加一个中文说明来代替属性名作为表头

有了上面的基础,我们就可以增加更多的项来实现功能的丰富性,比如

{"fieldName": "username", "fieldNameZh": "账号","width": 20, // 列宽"backgroundColor": 1, // 表头背景色"fontSize": 20, // 字体大小"type": "date(yyyy-MM-dd)" // 字段类型...
}

注:字段类型可以用作数据格式化,比如该属性是一个status状态,1表示正常,2表示异常,那么导出这个1或2是没有意义的,所以通过字段类型识别出这个状态值对应的中文描述,这样的导出才正常。

一级表头已经可以满足我们许多场景了,但是这并不足够,我的经验中,经常需要用到两行表头甚至是复杂表头,好在EasyExcel是支持多级表头的。

多级表头

先贴出EasyExcel生成二级表头的示例代码:

// 模拟表头
private static List<List<String>> getHeader() {List<List<String>> list = new ArrayList<>();list.add(createHead("用户信息", "账号"));list.add(createHead("用户信息", "昵称"));list.add(createHead("用户信息", "联系方式"));list.add(createHead("用户信息", "注册时间"));list.add(createHead("角色信息", "超管"));list.add(createHead("角色信息", "管理员"));return list;
}public static List<String> createHead(String... head) {return new ArrayList<>(Arrays.asList(head));
}// 模拟数据
public static List<List<Object>> getDataList() {List<List<Object>> list = new ArrayList<>();list.add(createData("admin", "超管", "18818881888", "2023-06-23 17:16:00", "是", "是"));list.add(createData("cc", "管理员", "18818881888", "2023-06-23 17:16:00", "否", "是"));return list;
}public static List<Object> createData(String... data) {return new ArrayList<>(Arrays.asList(data));
}

效果是这样的:

图片

可以看到,前面4列有一个共同表头【用户信息】,后面两列有一个共同表头【角色信息】,从上面的示例代码我们知道,要使表头合并,数据列表得按顺序和相同表头名,这样会被EasyExcel识别到然后才有合并效果,这点需要注意。

同理,当我们需要生成复杂表头的时候,可以这样:

// 模拟表头
private static List<List<String>> getHeader() {List<List<String>> list = new ArrayList<>();list.add(createHead("导出用户数据", "用户信息", "账号"));list.add(createHead("导出用户数据", "用户信息", "昵称"));list.add(createHead("导出用户数据", "用户信息", "联系方式"));list.add(createHead("导出用户数据", "用户信息", "注册时间"));list.add(createHead("导出用户数据", "角色信息", "超管"));list.add(createHead("导出用户数据", "角色信息", "管理员"));return list;
}

效果图:

图片

结论

以上是我对导出功能的思考和实现思路,因为篇幅的关系,我没有贴出完整的代码,但是相信以上内容已经足够大家作为参考,缺少的内容,比如列宽、颜色字体等设置,请查阅EasyExcel官方文档来实现,主要方式就是根据前端传过来的JSON配置信息,来动态配置EasyExcel的导出文件。

导入

导入分两个步骤:

  • 用户下载导入模板

  • 用户填内容进导入模板,然后上传模板文件到系统,实现数据导入操作

下载导入模板

导入模板只需要上面的customHeads参数即可:

"customHeads": [{"fieldName": "username", "fieldNameZh": "账号"},{"fieldName": "nickname","fieldNameZh": "昵称"},{"fieldName": "phone","fieldNameZh": "联系方式"},{"fieldName": "createTime","fieldNameZh": "注册时间"}]

甚至fieldName都可以不要,生成一个只有表头的excel文件。

导入数据

导入数据有两种场景:

  • 单表数据导入,该场景很简单

  • 复杂数据导入,涉及多表,这种情况就稍微复杂点

单表数据导入

单表只需要考虑对应实体类的属性即可,我们可以通过反射来获取实体类的属性,所以需要的配置项是:

  • modelClazz: 实体类路径,如:com.cc.entity.User

配置示例:

{"modelClazz": "com.cc.entity.User","customHeads": [{"fieldName": "username", "fieldNameZh": "账号"},{"fieldName": "nickname","fieldNameZh": "昵称"},{"fieldName": "phone","fieldNameZh": "联系方式"},{"fieldName": "createTime","fieldNameZh": "注册时间"}]
}

这样在导入数据,被EasyExcel读取每一行数据的时候,可以识别到如:username项对应com.cc.entity.User类的username属性那么就能做到类似这样的事情:

User user = new User();
user.setUsername(fieldName列的值)

由此可以得到一个List<User> userList数组,再通过系统的UserService或UserMapper保存到数据库,即可实现数据导入操作。

复杂数据导入

复杂数据比如这种场景:excel文件中每行的数据是这样的:

图片

其中是否超管和是否管理员涉及关联表:

  • 用户表:tb_user

  • 角色表:tb_role

  • 用户角色关联表:tb_user_role_relation

为了支持这种复杂数据导入,系统内需要提供对应的保存方法:

1.新建DTO类:

第一种:

public class UserDto {private String username;private String nickname;private String phone;private Date createTime;private Boolean superAdminFlag;private Boolean adminFlag;
}

第二种:

public class UserDto {private User user;private Role role;
}

这两种DTO的情况我们都应该考虑,第一种不用多说,上面的配置就可以应对,主要看第二种,第二种方式要考虑“路径”这个问题,所以customHeads的写法就要有所改变:

{"modelClazz": "com.cc.model.UserDto","customHeads": [{"fieldName": "user.username", "fieldNameZh": "账号"},...]
}

这样配置账号路径为:user.username,属性的反射查询就要有递归概念,先去查找UserDto类的user属性,得到该属性的类,再去获取其内的username属性,赋值方式就变成了:

UserDto dto = new UserDto();
User user = new User();
user.setUsername(fieldName列的值);
dto.setUser(user);

这样得到一个List<UserDto> dtoList数组。

2.既然有复杂数据导入的业务,那么在Service业务层中,也应该编写复杂数据的保存函数:

public interface UserService {// 单条插入void saveUserDto(UserDto dto);// 批量插入void saveUserDtoBatch(List<UserDto> dtoList);
}
@Service
public class UserServiceImpl implements UserService {@Autowiredprivate UserMapper userMapper;@Autowiredprivate RoleService roleService;@Autowiredprivate UserRoleRelationService relationService;// 事务@Transactional(rollbackFor = Exception.class)@Overridepublic void saveUserDto(UserDto dto) {// 保存用户User user = userMapper.save(dto.getUser());// 保存角色Role role = roleService.save(dto.getRole);// 保存关联UserRoleRelation relation = new UserRoleRelation();relation.setUserId(user.getId());relation.setRoleId(role.getId());relationService.save(relation);}// 批量插入代码省略,原理同上void saveUserDtoBatch(List<UserDto> dtoList);
}

3.通过EasyExcel读取到的每一行数据都能转成UserDto对象,再通过单条或批量来保存数据,这期间有许多可以优化考虑的点,比如:

  • 批量比单条保存效率高、性能好,但是批量不容易识别出部分失败的行

  • 批量保存的数量不能太多,要考虑系统和数据库的性能,比如每次读取500行就执行一次保存

  • 保存的进度显示,先获取excel总行数,再根据当前读取行数来计算进度,并返回给前端

  • 导入时间过长,可以做成后台任务进行,至于前端提醒可以是轮询也可以是WebSocket

所以需要指定查询方法,这配置项上面已经给出来了。

配置项总结

最后给出一个总配置项出来参考:

导出数据配置

{"filename": "用户数据导出","serviceClazz": "com.cc.service.UserService","methodName": "listByCondition","countMethodName": "countByCondition","searchParams": [{"nickname": "cc" // 搜索昵称为cc的用户}],"customHeads": [{"fieldName": "username","fieldNameZh": "账号","width": 20, // 列宽"fontSize": 20 // 字体大小},{"fieldName": "createTime","fieldNameZh": "注册时间","type": "date(yyyy-MM-dd)" // 属性类型声明为date,并且转换成指定格式导出}]
}

导入模板配置

{"filename": "用户数据导入","modelClazz": "com.cc.entity.User","customHeads": [{"fieldName": "username","fieldNameZh": "账号","width": 20, // 列宽"fontSize": 20 // 字体大小},{"fieldName": "createTime","fieldNameZh": "注册时间","type": "date(yyyy-MM-dd)" // 属性类型声明为date,并且转换成指定格式导出}]
}

导入数据配置

{"modelClazz": "com.cc.entity.User","serviceClazz": "com.cc.service.UserService","methodName": "save","customHeads": [{"fieldName": "username","fieldNameZh": "账号",},{"fieldName": "createTime","fieldNameZh": "注册时间","type": "date(yyyy-MM-dd)" // 属性类型声明为date,并且转换成指定格式导出}]
}

最后说一句(求关注!别白嫖!)

如果这篇文章对您有所帮助,或者有所启发的话,求一键三连:点赞、转发、在看。

关注公众号:woniuxgg,在公众号中回复:笔记  就可以获得蜗牛为你精心准备的java实战语雀笔记,回复面试、开发手册、有超赞的粉丝福利!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/587237.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

初学者必看!bashplotlib库让你轻松在Bash脚本中实现数据可视化

1. 是什么 bashplotlib 是一个 Python 库&#xff0c;用于在 Bash 脚本中生成数据可视化。它允许用户使用 Python 代码创建各种类型的图表&#xff0c;并将它们嵌入到 Bash 脚本中。bashplotlib 支持多种图表类型&#xff0c;包括条形图、折线图、饼图等。 2. 核心功能 bashplo…

YOLOv8全网独家改进: 小目标 | 注意力 |卷积和注意力融合模块(CAFMAttention) | 2024年4月最新成果

💡💡💡本文独家改进:卷积和注意力融合模块(CAFMAttention),增强对全局和局部特征的提取能力,2024年最新的改进思路 💡💡💡创新点:卷积和注意力巧妙设计 💡💡💡如何跟YOLOv8结合:1)放在backbone后增强对全局和局部特征的提取能力;2)放在detect前面,增…

共享社会经济路径(SSP1-5)中国及分省人口预估数据库_v2

v1数据集&#xff1a; 在共享社会经济路径&#xff08;SSPs&#xff09;全球框架下&#xff0c;根据本地化人口和经济参数&#xff0c;采用人口-发展-环境&#xff08;PDE&#xff09;模型&#xff0c;构建2020-2100年SSPs人口格点数据&#xff1b;采用柯布-道格拉斯&#xff…

MySQL基础知识(一)-超详细Windows系统安装MySQL详细教程

1.简介 原计划&#xff0c;今天这篇想要给小伙伴们讲解一下python操作mysql数据库&#xff0c;但是由于近期换了一台新的电脑&#xff0c;所以一看mysql数据库都没安装&#xff0c;所有才有了这篇文章。尽管网上不乏此类型的文章&#xff0c;但是刚好自己要安装&#xff0c;所以…

8个例子探秘 Python 元类与定制类

大家好&#xff0c;今天我们要一起探索 Python 世界里的神秘角色——元类&#xff08;Metaclasses&#xff09;&#xff0c;它们就像魔法一样&#xff0c;能让我们的类变得超乎寻常。想象一下&#xff0c;如果你的类能自己决定自己的行为&#xff0c;那是不是超级酷炫&#xff…

3.5网安学习第三阶段第五周回顾(个人学习记录使用)

本周重点 ①SSRF服务器端请求伪造 ②序列化和反序列化 ③Vaudit代码审计 本周主要内容 ①SSRF服务器端请求伪造 一、概述 SSRF: server site request forgery (服务器端请求伪造)。 SSR: 服务端请求&#xff0c;A服务器通过函数向B服务器发送请求。 SSRF发生的前提条件…

STM32-02基于HAL库(CubeMX+MDK+Proteus)GPIO输出案例(LED流水灯)

文章目录 一、功能需求分析二、Proteus绘制电路原理图三、STMCubeMX 配置引脚及模式&#xff0c;生成代码四、MDK打开生成项目&#xff0c;编写HAL库的GPIO输出代码五、运行仿真程序&#xff0c;调试代码 一、功能需求分析 在完成开发环境搭建之后&#xff0c;开始使用STM32GP…

谷歌google广告和必应Bing广告,是否二选一?

搜索引擎广告凭借其精准定向、高度可见性和高效转化能力&#xff0c;成为众多企业拓展海外市场、提升品牌影响力的重要手段。其中&#xff0c;谷歌Google与必应Bing作为全球两大主流搜索引擎&#xff0c;各自拥有庞大的用户群体与独特的市场优势。面对这两大广告平台&#xff0…

【Qt 学习笔记】Qt 背景介绍

博客主页&#xff1a;Duck Bro 博客主页系列专栏&#xff1a;Qt 专栏关注博主&#xff0c;后期持续更新系列文章如果有错误感谢请大家批评指出&#xff0c;及时修改感谢大家点赞&#x1f44d;收藏⭐评论✍ Qt 背景介绍 文章编号&#xff1a;Qt 学习笔记 / 01 文章目录 Qt 背景…

C++面向对象程序设计 - 构造函数

C提供了构造函数来处理对象的初始化&#xff0c;构造函数是一种特殊的成员函数&#xff0c;与其他成员函数不同&#xff0c;它不需要用户来调用&#xff0c;而是在建立对象时自动执行。构造函数名称必须与类同名&#xff0c;而不能由用户任意命名&#xff0c;以便编译系统能识别…

车载以太网AVB交换机 TSN交换机 时间敏感网络 11口 千兆 SW2000TSN

目录 一、TSN时间敏感交换机概述 二、产品介绍 SW2000M/H TSN 1、产品框架 2、产品特点与参数 产品特点 产品参数 3、配置与使用 4、常用连接方式 4.1 双通道作为监控和数据采集器&#xff0c;采集两个设备间的通信数据&#xff08;Bypass功能&#xff09; 4.2 试验搭…

曲线降采样之道格拉斯-普克算法Douglas–Peucker

曲线降采样之道格拉斯-普克算法Douglas–Peucker 该算法的目的是&#xff0c;给定一条由线段构成的曲线&#xff0c;找到一条点数较少的相似曲线&#xff0c;来近似描述原始的曲线&#xff0c;达到降低时间、空间复杂度和平滑曲线的目的。 附赠自动驾驶学习资料和量产经验&…