百度360必应搜狗淘宝本站头条
当前位置:网站首页 > IT知识 > 正文

Spring Boot中如何实现批量插入操作?

liuian 2025-04-27 14:46 100 浏览

其实在SpringBoot中想要实现批量插入操作可以有很多的方式,这主要取决于你所选用的ORM框架以及所使用的数据库。下面是我们总结的一些常用的实现批量插入操作的方法,我们一起来看看吧!

使用Spring Data JPA批量插入

Spring Data JPA是目前比较流行的一个ORM工具框架,在这个框架中支持了批量插入的操作。在默认的情况下,Spring Data JPA会在插入每条记录后立即执行flush操作。为了提高性能,可以手动控制flush和clear操作。如下所示。

import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;
import javax.persistence.EntityManager;
import javax.persistence.PersistenceContext;
import java.util.List;

@Service
public class BatchInsertService {

    @Autowired
    private YourEntityRepository repository;

    @PersistenceContext
    private EntityManager entityManager;

    @Transactional
    public void batchInsert(List<YourEntity> entities) {
        int batchSize = 50; // 批处理大小,可以根据实际情况调整
        for (int i = 0; i < entities.size(); i++) {
            entityManager.persist(entities.get(i));
            if (i % batchSize == 0 && i > 0) {
                entityManager.flush();
                entityManager.clear();
            }
        }
        entityManager.flush();
        entityManager.clear();
    }
}

使用JDBC批量插入

当然除了上面的这种方式之外,如果在项目中不想使用JPA技术,也可以通过JDBC操作来实现数据的批量插入操作,如下所示。

import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.jdbc.core.JdbcTemplate;
import org.springframework.stereotype.Service;
import java.util.List;

@Service
public class BatchInsertService {

    @Autowired
    private JdbcTemplate jdbcTemplate;

    public void batchInsert(List<YourEntity> entities) {
        String sql = "INSERT INTO your_table (column1, column2) VALUES (?, ?)";
        jdbcTemplate.batchUpdate(sql, entities, 1000, (ps, argument) -> {
            ps.setString(1, argument.getColumn1());
            ps.setString(2, argument.getColumn2());
        });
    }
}

使用MyBatis批量插入

除了上述两种方式之外,还有就是我们比较常用的MyBatis框架的批量插入操作。如下所示。

import org.apache.ibatis.annotations.Insert;
import org.apache.ibatis.annotations.Mapper;
import org.apache.ibatis.annotations.Param;
import java.util.List;

@Mapper
public interface YourEntityMapper {

    @Insert({
        "<script>",
        "INSERT INTO your_table (column1, column2) VALUES ",
        "<foreach collection='entities' item='entity' separator=','>",
        "(#{entity.column1}, #{entity.column2})",
        "</foreach>",
        "</script>"
    })
    void batchInsert(@Param("entities") List<YourEntity> entities);
}

@Service
public class BatchInsertService {

    @Autowired
    private YourEntityMapper mapper;

    public void batchInsert(List<YourEntity> entities) {
        mapper.batchInsert(entities);
    }
}

但是需要注意,在批量插入时,要注意控制批处理的大小。批次过大会导致内存溢出,过小则无法充分发挥批量操作的性能优势。对于批量插入的事务性来讲,需要确保批量插入操作在事务中执行,以确保数据的一致性和完整性。

从数据库层面来讲,不同的数据库支持的批量插入的性能优化操作是不一样的,需要具体根据相应的数据库来选择合适的方式来操作。

总结

这些方法均适用于Spring Boot项目,可以根据实际需求和技术栈选择合适的方式进行批量插入操作。

相关推荐

MySQL慢查询优化:从explain到索引,DBA手把手教你提升10倍性能

数据库性能是应用系统的生命线,而慢查询就像隐藏在系统中的定时炸弹。某电商平台曾因一条未优化的SQL导致订单系统响应时间从200ms飙升至8秒,最终引发用户投诉和订单流失。今天我们就来系统学习MySQL...

一文读懂SQL五大操作类别(DDL/DML/DQL/DCL/TCL)的基础语法

在SQL中,DDL、DML、DQL、DCL、TCL是按操作类型划分的五大核心语言类别,缩写及简介如下:DDL(DataDefinitionLanguage,数据定义语言):用于定义和管理数据库结构...

闲来无事,学学Mysql增、删,改,查

Mysql增、删,改,查1“增”——添加数据1.1为表中所有字段添加数据1.1.1INSERT语句中指定所有字段名语法:INSERTINTO表名(字段名1,字段名2,…)VALUES(值1...

数据库:MySQL 高性能优化规范建议

数据库命令规范所有数据库对象名称必须使用小写字母并用下划线分割所有数据库对象名称禁止使用MySQL保留关键字(如果表名中包含关键字查询时,需要将其用单引号括起来)数据库对象的命名要能做到见名识意,...

下载工具合集_下载工具手机版

迅雷,在国内的下载地位还是很难撼动的,所需要用到的地方还挺多。缺点就是不开会员,软件会限速。EagleGet,全能下载管理器,支持HTTP(S)FTPMMSRTSP协议,也可以使用浏览器扩展检测...

mediamtx v1.15.2 更新详解:功能优化与问题修复

mediamtxv1.15.2已于2025年10月14日发布,本次更新在功能、性能优化以及问题修复方面带来了多项改进,同时也更新了部分依赖库并提升了安全性。以下为本次更新的详细内容:...

声学成像仪:泄露监测 “雷达” 方案开启精准防控

声学成像仪背景将声像图与阵列上配装的摄像实所拍的视频图像以透明的方式叠合在一起,就形成了可直观分析被测物产生状态。这种利用声学、电子学和信息处理等技术,变换成人眼可见的图像的技术可以帮助人们直观地认识...

最稳存储方案:两种方法将摄像头接入威联通Qu405,录像不再丢失

今年我家至少被4位邻居敲门,就是为了查监控!!!原因是小区内部监控很早就停止维护了,半夜老有小黄毛掰车门偷东西,还有闲的没事划车的,车主损失不小,我家很早就配备监控了,人来亮灯有一定威慑力,不过监控设...

离岗检测算法_离岗检查内容

一、研发背景如今社会许多岗位是严禁随意脱离岗位的,如塔台、保安室、监狱狱警监控室等等,因为此类行为可能会引起重大事故,而此类岗位监督管理又有一定困难,因此促生了智能视频识别系统的出现。二、产品概述及工...

消防安全通道占用检测报警系统_消防安全通道占用检测报警系统的作用

一、产品概述科缔欧消防安全通道占用检测报警系统,是创新行业智能监督管理方式、完善监管部门动态监控及预警预报体系的信息化手段,是实现平台远程监控由“人为监控”向“智能监控”转变的必要手段。产品致力于设...

外出住酒店、民宿如何使用手机检测隐藏的监控摄像头

最近,一个家庭在他们的民宿收到了一个大惊喜:客厅里有一个伪装成烟雾探测器的隐藏摄像头,监视着他们的一举一动。隐藏摄像头的存在如果您住在酒店或民宿,隐藏摄像头不应再是您的担忧。对于民宿,房东应报告所有可...

基于Tilera众核平台的流媒体流量发生系统的设计

曾帅,高宗彬,赵国锋(重庆邮电大学通信与信息工程学院,重庆400065)摘要:设计了一种基于Tilera众核平台高强度的流媒体流量发生系统架构,其主要包括:系统界面管理模块、服务承载模块和流媒体...

使用ffmpeg将rtsp流转流实现h5端播放

1.主要实现rtsp转tcp协议视频流播放ffmpeg下载安装(公认业界视频处理大佬)a、官网地址:www.ffmpeg.org/b、gitHub:github.com/FFmpeg/FFmp…c、推...

将摄像头视频流从Rtsp协议转为websocket协议

写在前面很多通过摄像头拿到的视频流格式都是Rtsp协议的,比如:海康威视摄像头。在现代的浏览器中,已经不支持直接播放Rtsp视频流,而且,海康威视提供的本身的webSdk3.3.0视频插件有很多...

华芸科技推出安全监控中心2.1 Beta测试版

全球独家支持hdmi在线实时监看摄像机画面,具单一、循环或同时监看四频道视频影像,可透过华芸专用红外线遥控器、airemote或是键盘鼠标进行操作,提供摄像机频道增购服务,满足用户弹性扩增频道需...