Mybatis批量操作

示例:批量insert多条语句

1、mapper文件中定义sql,your_table 要插入数据的表名,column1, column2, ... 是表中的列名,field1, field2, ... 是对应表的Entity中的属性名,执行的后生成的sql如下:

INSERT INTO your_table (column1, column2, ...) VALUES(column1, column2, ...),(...)

XML 复制代码
<insert id="batchInsert">
    INSERT INTO your_table (column1, column2, ...)
    VALUES
    <foreach collection="list" item="item" index="index" separator=",">
        (#{item.field1}, #{item.field2}, ...)
    </foreach>
</insert>

2、程序调用

java 复制代码
List<YourEntity> entities = new ArrayList<>();
// 填充entities列表
YourMapper mapper = sqlSession.getMapper(YourMapper.class);
mapper.batchInsert(entities);
sqlSession.commit();

上述程序执行后,后台只会发送1条sql语句:INSERT INTO your_table (column1, column2, ...) VALUES(column1, column2, ...),(...)

当1次插入的数据量过大,如100万,受限于网络包大小限制或者有些数据库有最大接受包的限制(如mysql 中max_allowed_packet 参数限制,默认值为4M),会出现如下sql异常:com.mysql.jdbc.PacketTooBigException

解决1次插入数据量过大问题:

解决办法,分批插入,比如每次插入200条

java 复制代码
public void insertLargeNumberOfRecords(List<YourEntity> entities) {
    int batchSize = 200;
    int numberOfBatches = (entities.size() + batchSize - 1) / batchSize;
 
    for (int i = 0; i < numberOfBatches; ++i) {
        int start = i * batchSize;
        int end = Math.min(start + batchSize, entities.size());
        List<YourEntity> batchEntities = entities.subList(start, end);
 
        yourMapper.insertBatch(batchEntities);
    }
}

示例:批量删除

mapp文件如下:

XML 复制代码
<!-- 在Mapper XML中定义批量删除的操作 -->
<delete id="batchDelete" parameterType="list">
  DELETE FROM your_table WHERE id IN
  <foreach item="item" collection="list" open="(" separator="," close=")">
    #{item}
  </foreach>
</delete>

1次删除数据量过大问题解决办法参考【解决1次插入数据量过大问题】

相关推荐
是梦终空41 分钟前
JAVA毕业设计253—基于Java+Springboot+vue3+协同过滤推荐算法的传统服饰文化平台(源代码+数据库+任务书+12000字论文)
java·spring boot·vue·毕业设计·课程设计·协同过滤推荐算法·传统服饰文化平台
HerayChen8 小时前
HbuilderX 内存溢出报错
java·大数据·linux
程序员小白条8 小时前
0经验如何找实习?
java·开发语言·数据结构·数据库·链表
小马爱打代码9 小时前
Spring AI:搭建自定义 MCP Server:获取 QQ 信息
java·人工智能·spring
郭涤生9 小时前
QT 架构笔记
java·数据库·系统架构
daidaidaiyu9 小时前
基于LangGraph开发复杂智能体学习一则
java·ai
小小8程序员9 小时前
STL 库(C++ Standard Template Library)全面介绍
java·开发语言·c++
a努力。9 小时前
Redis Java 开发系列#2 数据结构
java·数据结构·redis
a努力。10 小时前
腾讯Java面试被问:String、StringBuffer、StringBuilder区别
java·开发语言·后端·面试·职场和发展·架构
Vic1010111 小时前
解决 Spring Security 在异步线程中用户信息丢失的问题
java·前端·spring