Spring Batch 中实现每项提交的更新与插入操作

陌雪酱_6629

陌雪酱_6629

2026-07-17

440人浏览

原创

Spring Batch 中实现每项提交的更新与插入操作

本文详解如何在 spring batch 中配置 itemwriter,通过设置 chunk size 为 1 实现“每处理一项即提交一次”的原子性写入,支持混合执行数据库更新与插入,并明确 jdbcbatchitemwriter 与 repositoryitemwriter 的选型依据及自定义业务逻辑集成方式。

本文详解如何在 spring batch 中配置 itemwriter,通过设置 chunk size 为 1 实现“每处理一项即提交一次”的原子性写入,支持混合执行数据库更新与插入,并明确 jdbcbatchitemwriter 与 repositoryitemwriter 的选型依据及自定义业务逻辑集成方式。

在 Spring Batch 中,ItemWriter 的设计天然面向批量写入——其 write(List extends T> items) 方法接收一个列表,这是为了配合 chunk-oriented processing(基于块的处理)提升 I/O 效率。但当业务要求每个条目独立提交、失败隔离、不可重复处理(例如:某条记录成功落库后,即使后续条目失败也不应回滚),最直接且推荐的做法是将 chunk size 设为 1:

@Bean
public Step processStep() {
    return stepBuilderFactory.get("processStep")
            .<inputitem outputitem>chunk(1) // 关键:每项成一块
            .reader(itemReader())
            .processor(itemProcessor())       // 可返回 null 跳过该条目
            .writer(itemWriter())
            .build();
}</inputitem>

此时,尽管 ItemWriter.write() 签名仍接收 List,但实际传入的 list 恒为单元素集合(或空)。你可在 writer 中安全地解包并执行细粒度操作:

✅ 推荐写法:使用 RepositoryItemWriter(JPA 场景)

适用于已建模实体、需复用 JPA 事务语义及关联逻辑的场景:

@Bean
public ItemWriter<outputitem> itemWriter() {
    RepositoryItemWriter<outputitem> writer = new RepositoryItemWriter();
    writer.setRepository(outputItemRepository); // Spring Data JPA Repository
    writer.setMethodName("save"); // 或自定义方法如 "upsert"
    return writer;
}</outputitem></outputitem>

⚠️ 注意:RepositoryItemWriter 默认调用 save(),对已有 ID 的实体自动触发 UPDATE,无 ID 则 INSERT。若需更精确控制(如先查后更、多表联写),建议封装为自定义 Service 方法并在 writer 中调用。

✅ 替代方案:使用 JdbcBatchItemWriter(纯 JDBC / 高性能场景)

虽名为“Batch”,但 chunk size=1 时仍完全可用,适合需原生 SQL 控制、避免 JPA 开销或跨多表复杂 DML 的情况:

@Bean
public ItemWriter<outputitem> itemWriter() {
    JdbcBatchItemWriter<outputitem> writer = new JdbcBatchItemWriter();
    writer.setDataSource(dataSource);
    writer.setSql("MERGE INTO target_table USING (VALUES (?, ?, ?)) AS vals(id, name, status) " +
                  "ON target_table.id = vals.id " +
                  "WHEN MATCHED THEN UPDATE SET name = vals.name, status = vals.status " +
                  "WHEN NOT MATCHED THEN INSERT (id, name, status) VALUES vals.id, vals.name, vals.status");
    writer.setItemPreparedStatementSetter((item, ps) -> {
        ps.setLong(1, item.getId());
        ps.setString(2, item.getName());
        ps.setString(3, item.getStatus());
    });
    return writer;
}</outputitem></outputitem>

✅ 进阶:自定义 ItemWriter 调用业务服务(最灵活)

当更新/插入涉及多个表、条件分支、外部 API 调用或复杂事务边界时,强烈建议封装为独立 Service 并在 Writer 中调用:

@Component
public class CustomItemWriter implements ItemWriter<outputitem> {

    private final ItemProcessingService processingService; // 注入你的业务服务

    public CustomItemWriter(ItemProcessingService processingService) {
        this.processingService = processingService;
    }

    @Override
    public void write(List extends OutputItem> items) throws Exception {
        if (items.isEmpty()) return;
        // chunk size = 1 → 安全取首项
        OutputItem item = items.get(0);
        processingService.upsertAndLog(item); // 内部含 update + insert + audit log 等
        // 事务由 Spring Batch 的 PlatformTransactionManager 自动管理,commit 在此处完成
    }
}</outputitem>

关键注意事项总结:

  • ✅ Processor 返回 null → 该项被过滤,Writer.write() 不会被调用,天然支持条件跳过;
  • ✅ 所有 writer 均运行在 Spring Batch 管理的事务中,chunk size = 1 即意味着每个 write() 调用后立即 commit;
  • ❌ 避免在 writer 中手动开启新事务(如 @Transactional(propagation = REQUIRES_NEW)),会破坏 Batch 的一致性保障;
  • ✅ 若需幂等重跑,务必在 Processor 或 Writer 中校验数据状态(如检查目标记录是否已存在),而非依赖 chunk 提交机制;
  • ? 日志建议:在 writer 或 service 中记录 item.getId() 和操作结果,便于故障定位与补偿。

综上,无需回避 List 参数签名——chunk size=1 是 Spring Batch 支持“逐条强一致性”的标准实践;选择 RepositoryItemWriter(快速开发)、JdbcBatchItemWriter(精准 SQL)或自定义 writer(复杂编排),取决于你的数据访问层偏好与业务复杂度。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
spring框架介绍
spring框架介绍

本专题整合了spring框架相关内容,想了解更多详细内容,请阅读专题下面的文章。

2025.08.06

2671

22

Java Spring Security 与认证授权
Java Spring Security 与认证授权

本专题系统讲解 Java Spring Security 框架在认证与授权中的应用,涵盖用户身份验证、权限控制、JWT与OAuth2实现、跨站请求伪造(CSRF)防护、会话管理与安全漏洞防范。通过实际项目案例,帮助学习者掌握如何 使用 Spring Security 实现高安全性认证与授权机制,提升 Web 应用的安全性与用户数据保护。

2026.01.26

477

25

spring boot框架优点
spring boot框架优点

spring boot框架的优点有简化配置、快速开发、内嵌服务器、微服务支持、自动化测试和生态系统支持。本专题为大家提供spring boot相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.05

651

5

spring框架有哪些
spring框架有哪些

spring框架有Spring Core、Spring MVC、Spring Data、Spring Security、Spring AOP和Spring Boot。详细介绍:1、Spring Core,通过将对象的创建和依赖关系的管理交给容器来实现,从而降低了组件之间的耦合度;2、Spring MVC,提供基于模型-视图-控制器的架构,用于开发灵活和可扩展的Web应用程序等。

2023.10.12

1455

7

Java Spring Boot开发
Java Spring Boot开发

本专题围绕 Java 主流开发框架 Spring Boot 展开,系统讲解依赖注入、配置管理、数据访问、RESTful API、微服务架构与安全认证等核心知识,并通过电商平台、博客系统与企业管理系统等项目实战,帮助学员掌握使用 Spring Boot 快速开发高效、稳定的企业级应用。

2025.08.19

5126

10

Java Spring Boot 4更新教程_Java Spring Boot 4有哪些新特性
Java Spring Boot 4更新教程_Java Spring Boot 4有哪些新特性

Spring Boot 是一个基于 Spring 框架的 Java 开发框架,它通过 约定优于配置的原则,大幅简化了 Spring 应用的初始搭建、配置和开发过程,让开发者可以快速构建独立的、生产级别的 Spring 应用,无需繁琐的样板配置,通常集成嵌入式服务器(如 Tomcat),提供“开箱即用”的体验,是构建微服务和 Web 应用的流行工具。

2025.12.22

436

5

Java Spring Boot 微服务实战
Java Spring Boot 微服务实战

本专题深入讲解 Java Spring Boot 在微服务架构中的应用,内容涵盖服务注册与发现、REST API开发、配置中心、负载均衡、熔断与限流、日志与监控。通过实际项目案例(如电商订单系统),帮助开发者掌握 从单体应用迁移到高可用微服务系统的完整流程与实战能力。

2025.12.24

660

18

Spring Boot企业级开发与MyBatis Plus实战
Spring Boot企业级开发与MyBatis Plus实战

本专题面向 Java 后端开发者,系统讲解如何基于 Spring Boot 与 MyBatis Plus 构建高效、规范的企业级应用。内容涵盖项目架构设计、数据访问层封装、通用 CRUD 实现、分页与条件查询、代码生成器以及常见性能优化方案。通过完整实战案例,帮助开发者提升后端开发效率,减少重复代码,快速交付稳定可维护的业务系统。

2026.02.11

405

24

Kotlin协程编程与Spring Boot集成实践
Kotlin协程编程与Spring Boot集成实践

本专题围绕 Kotlin 协程机制展开,深入讲解挂起函数、协程作用域、结构化并发与异常处理机制,并结合 Spring Boot 展示协程在后端开发中的实际应用。内容涵盖异步接口设计、数据库调用优化、线程资源管理以及性能调优策略,帮助开发者构建更加简洁高效的 Kotlin 后端服务架构。

2026.02.12

371

18

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.9万人学习