您的位置 首页 java

Java之批量导入与异步添加数据库

1、 导入模板是用来给系统使用者在导入数据时使用的,有了导入模板就相当于有了一个导入的规范,确定需要导入哪些列来让使用者填入,导入模板并不用事先提供一个Excel,而是通过代码直接生成一个Excel文件,Excel文件中的列也是由前面实体类中确定的,这样的好处是,当列的数量改变时不用人为的去替换修改Excel,因为它是有代码生成的。利用导入模板的代码例子如下:

2、导入后的数据要进入参数校验,然后创建 线程池 (这里用的是单线程池)它只会用唯一的工作线程来执行任务,保证所有任务按照指定顺序(FIFO, LIFO, 优先级)执行。

  Executor Service executor = Executors.newSingleThreadExecutor();

Executors创建 线程 的其他方式:

newCachedThreadPool创建一个可缓存线程池,如果线程池长度超过处理需要,可灵活回收空闲线程,若无可回收,则新建线程。

newFixedThreadPool 创建一个定长线程池,可控制线程最大并发数,超出的线程会在队列中等待。

newScheduledThreadPool 创建一个定长线程池,支持定时及周期性任务执行。
  

3、开始异步将导入的数据添加到数据库中,其中用到了Java 8新增的CompletableFuture类

Java之批量导入与异步添加数据库

CompletableFuture能够将 回调 放到与任务不同的线程中执行,也能将回调作为继续执行的同步函数,在与任务相同的线程中执行。它避免了传统回调最大的问题,那就是能够将控制流分离到不同的事件处理器中。

CompletableFuture弥补了Future模式的缺点。在异步的任务完成后,需要用其结果继续操作时,无需等待。可以直接通过thenAccept、thenApply、thenCompose等方式将前面异步处理的结果交给另外一个异步事件处理线程来处理。

4、导入后的数据如果需要按时间或其他方式重新排序可以使用 迭代器 迭代器只针对集合类型的数据,因此map类型的必须先转换成集合类型才能使用迭代器去获取元素。 keySet获得的只是key值的集合,values获得的是value集合,entryset获得的是键值对的集合。

文章来源:智云一二三科技

文章标题:Java之批量导入与异步添加数据库

文章地址:https://www.zhihuclub.com/180961.shtml

关于作者: 智云科技

热门文章

网站地图