Mybatis如何实现一个高效的批量插入操作呢?
admin
2024-02-22 21:46:09
0

转自:

Mybatis如何实现一个高效的批量插入操作呢?

下文是笔者收集的MyBatis高效插入数据的示例分享,请大家参阅

MyBatis简介

我们都知道MyBatis是目前市面上使用比较多的一个持久层框架(SSM中的M),
MyBatis可以简化实体类的封装操作,MyBatis通过mapper.xml文件可实现数据库各中操作,详细请见Mybatis教程
那么MyBatis如何实现批量插入数据操作呢?下文将讲述具体的实现思路,如下所示:

方式一:使用MyBatis中的 foreach标签

借助foreach,在sql语句中实现一个迭代集合,
foreach标签拥有一下属性(item,index,collection,open,separator,close)
item:集合中每一个元素进行迭代时的别名
index:设置名称,用于表示在迭代过程中,每次迭代到的位置
open:设置语句开始符
separator:设置每次进行迭代之间使用的分隔符
close:设置迭代的结束符号

注意事项:必须指定collection属性,此属性可放入List,array,Map

例:
*Mapper.xml的定义如下:


INSERT INTO users(name,pwd)

SELECT #{item.name} as a, #{item.pwd} as b FROM DUAL


方式二:使用mybatis ExecutorType.BATCH

Mybatis中内置了3种ExecutorType有3种:

  1. simple,此模式下它为每个语句的执行创建一个新的预处理语句,单条提交sql
  2. REUSE,此模式是可重用执行器,重用对象是Statement(即该执行器会缓存同一个sql的Statement,省去Statement的重新创建,优化性能)(即会重用预处理语句)
  3. batch,此模式重复使用已经预处理的语句,并且批量执行所有更新语句,显然batch性能将更优
注意事项:Batch模式是最快捷的一张方式,但是需用户自定义主键
当然Hibernate中也有类似Batch的处理方式

例:

方式一 spring+mybatis 的

//获取 sqlsession
//注入原有的sqlSessionTemplate
@Autowired
private SqlSessionTemplate sqlSessionTemplate;// 新获取一个模式为BATCH,并自动提交为false的session
// 当自动提交设置为true,将无法控制提交的条数,改为最后统一提交,可能导致内存溢出(注意控制提交数量,如达到1000条提交一次)SqlSession session = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH,false);
//通过新的session获取mapper
userMapper = session.getMapper(UserMapper.class);
int size = 10000;
try{
for(int i = 0; i < size; i++) {//生成实体类User user = new User();user.setName(String.valueOf(System.currentTimeMillis()));userMapper.insert(user);if(i % 1000 == 0 || i == size - 1) { //手动每1000个一提交,提交后无法回滚 session.commit();//清理缓存,防止溢出session.clearCache();}}
} catch (Exception e) {//没有提交的数据可以回滚session.rollback();
} finally{session.close();
}/*
使用mapper及sql别名:包名+类名
*/public void insertBatch(Map paramMap, List list) throws Exception {
// 新获取一个模式为BATCH,自动提交为false的session
// 如果自动提交设置为true,将无法控制提交的条数,改为最后统一提交,可能导致内存溢出
SqlSession session = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH, false);
try {
if(null != list || list.size()>0){
int lsize=list.size();
for (int i = 0, n=list.size(); i < n; i++) {User user= list.get(i);
user.setIndate((String)paramMap.get("indate"));
user.setDatadate((String)paramMap.get("dataDate"));//数据归属时间 session.insert(“包名+类名", user);if ((i>0 && i % 1000 == 0) || i == lsize - 1) {//if语句的作用设置每1000个一提交,提交后无法回滚session.commit();// 清理缓存,防止溢出session.clearCache();}}
}
} catch (Exception e) {// 没有提交的数据可以回滚session.rollback();
e.printStackTrace();} finally {session.close();}
}

相关内容

热门资讯

【MySQL】锁 锁 文章目录锁全局锁表级锁表锁元数据锁(MDL)意向锁AUTO-INC锁...
【内网安全】 隧道搭建穿透上线... 文章目录内网穿透-Ngrok-入门-上线1、服务端配置:2、客户端连接服务端ÿ...
GCN的几种模型复现笔记 引言 本篇笔记紧接上文,主要是上一篇看写了快2w字,再去接入代码感觉有点...
数据分页展示逻辑 import java.util.Arrays;import java.util.List;impo...
Redis为什么选择单线程?R... 目录专栏导读一、Redis版本迭代二、Redis4.0之前为什么一直采用单线程?三、R...
【已解决】ERROR: Cou... 正确指令: pip install pyyaml
关于测试,我发现了哪些新大陆 关于测试 平常也只是听说过一些关于测试的术语,但并没有使用过测试工具。偶然看到编程老师...
Lock 接口解读 前置知识点Synchronized synchronized 是 Java 中的关键字,...
Win7 专业版安装中文包、汉... 参考资料:http://www.metsky.com/archives/350.htm...
3 ROS1通讯编程提高(1) 3 ROS1通讯编程提高3.1 使用VS Code编译ROS13.1.1 VS Code的安装和配置...
大模型未来趋势 大模型是人工智能领域的重要发展趋势之一,未来有着广阔的应用前景和发展空间。以下是大模型未来的趋势和展...
python实战应用讲解-【n... 目录 如何在Python中计算残余的平方和 方法1:使用其Base公式 方法2:使用statsmod...
学习u-boot 需要了解的m... 一、常用函数 1. origin 函数 origin 函数的返回值就是变量来源。使用格式如下...
常用python爬虫库介绍与简... 通用 urllib -网络库(stdlib)。 requests -网络库。 grab – 网络库&...
药品批准文号查询|药融云-中国... 药品批文是国家食品药品监督管理局(NMPA)对药品的审评和批准的证明文件...
【2023-03-22】SRS... 【2023-03-22】SRS推流搭配FFmpeg实现目标检测 说明: 外侧测试使用SRS播放器测...
有限元三角形单元的等效节点力 文章目录前言一、重新复习一下有限元三角形单元的理论1、三角形单元的形函数(Nÿ...
初级算法-哈希表 主要记录算法和数据结构学习笔记,新的一年更上一层楼! 初级算法-哈希表...
进程间通信【Linux】 1. 进程间通信 1.1 什么是进程间通信 在 Linux 系统中,进程间通信...
【Docker】P3 Dock... Docker数据卷、宿主机与挂载数据卷的概念及作用挂载宿主机配置数据卷挂载操作示例一个容器挂载多个目...