0


Spring Boot 同一个方法中操作多个数据源保证事务一致性

前言

工作中开发过多数据源的系统,比如资产清查系统,数据的存储分成了两个库,一个当前库和归档库,系统就需要配置两个数据源来满足业务需求。在常规的业务场景下,对两个库的业务操作是分开的,井水不犯河水。但是有一个功能实现是个例外,就是归档。将当前库的数据进行归档,需要修改当前库数据的状态,并将当前库数据插入到归档库中,这就需要在同一个方法实现中同时操作两个数据源,直接使用声明式事务@Transcational注解是无法保证两个事务的一致性的。

声明式事务则只能做到方法级别的颗粒度,而且每个方法只能配置一个事务管理器,虽然可以将逻辑拆分到多个方法中,再为每个方法加上@Transactional注解,但还是会存在问题,无法很好地处理多事务的业务场景。而这种问题可以使用编程式事务来解决,编程式事务可以将做到代码级别的颗粒度,更加的灵活。

前置环境

JDK8 + SringBoot2 + MySQL8

数据库

分别创建数据库 test1 test2

分别在两个数据库中创建 user 表

create table user (
id int auto_increment primary key,
username varchar(255),
password varchar(255)
);

pom

  1. <dependencyManagement>
  2. <dependencies>
  3. <dependency>
  4. <groupId>org.springframework.boot</groupId>
  5. <artifactId>spring-boot-dependencies</artifactId>
  6. <version>${spring-boot.version}</version>
  7. <type>pom</type>
  8. <scope>import</scope>
  9. </dependency>
  10. </dependencies>
  11. </dependencyManagement>
  12. <dependencies>
  13. <dependency>
  14. <groupId>org.springframework.boot</groupId>
  15. <artifactId>spring-boot-starter-web</artifactId>
  16. </dependency>
  17. <dependency>
  18. <groupId>org.springframework.boot</groupId>
  19. <artifactId>spring-boot-starter-data-jpa</artifactId>
  20. </dependency>
  21. <dependency>
  22. <groupId>mysql</groupId>
  23. <artifactId>mysql-connector-java</artifactId>
  24. </dependency>
  25. <dependencies>

yml

  1. server:
  2. port: 8888
  3. spring:
  4. datasource:
  5. primary:
  6. url: jdbc:mysql://localhost:3306/test1?useUnicode=true&characterEncoding=utf-8&useSSL=false&serverTimezone=UTC&allowPublicKeyRetrieval=true
  7. username: root
  8. password: mysql
  9. driver-class-name: com.mysql.cj.jdbc.Driver
  10. secondary:
  11. url: jdbc:mysql://localhost:3306/test2?useUnicode=true&characterEncoding=utf-8&useSSL=false&serverTimezone=UTC&allowPublicKeyRetrieval=true
  12. username: root
  13. password: mysql
  14. driver-class-name: com.mysql.cj.jdbc.Driver
  15. jpa:
  16. primary:
  17. show-sql: true
  18. properties:
  19. hibernate:
  20. hbm2ddl:
  21. auto: update
  22. dialect: org.hibernate.dialect.MySQL5InnoDBDialect
  23. secondary:
  24. show-sql: true
  25. properties:
  26. hibernate:
  27. hbm2ddl:
  28. auto: update
  29. dialect: org.hibernate.dialect.MySQL5InnoDBDialect

Config

这里主要注入主库和从库各自的JDBCTemplateTransactionManager,以便后续使用

主库数据源配置

  1. @Configuration
  2. @EnableTransactionManagement
  3. @EnableJpaRepositories (
  4. basePackages = PrimaryDatasourceAndJpaConfig.REPOSITORY_PACKAGE,
  5. entityManagerFactoryRef = "primaryEntityManagerFactory",
  6. transactionManagerRef = "primaryTransactionManager"
  7. )
  8. public class PrimaryDatasourceAndJpaConfig {
  9. private static final String REPOSITORY_PACKAGE = "com.jpa.dao.primary";
  10. private static final String ENTITY_PACKAGE = "com.jpa.entity.primary";
  11. //--------------数据源配置-------------------
  12. /**
  13. * 扫描spring.datasource.primary开头的配置信息
  14. *
  15. * @return 数据源配置信息
  16. */
  17. @Primary
  18. @Bean(name = "primaryDataSourceProperties")
  19. @ConfigurationProperties(prefix = "spring.datasource.primary")
  20. public DataSourceProperties dataSourceProperties() {
  21. return new DataSourceProperties();
  22. }
  23. /**
  24. * 取主库数据源对象
  25. *
  26. * @param dataSourceProperties 注入名为primaryDataSourceProperties的bean
  27. * @return 数据源对象
  28. */
  29. @Primary
  30. @Bean(name = "primaryDataSource")
  31. public DataSource dataSource(@Qualifier("primaryDataSourceProperties") DataSourceProperties dataSourceProperties) {
  32. return dataSourceProperties.initializeDataSourceBuilder().build();
  33. }
  34. /**
  35. * 该方法仅在需要使用JdbcTemplate对象时选用
  36. *
  37. * @param dataSource 注入名为primaryDataSource的bean
  38. * @return 数据源JdbcTemplate对象
  39. */
  40. @Primary
  41. @Bean(name = "primaryJdbcTemplate")
  42. public JdbcTemplate jdbcTemplate(@Qualifier("primaryDataSource") DataSource dataSource) {
  43. return new JdbcTemplate(dataSource);
  44. }
  45. /**
  46. * 扫描spring.jpa.primary开头的配置信息
  47. *
  48. * @return jpa配置信息
  49. */
  50. @Primary
  51. @Bean (name = "primaryJpaProperties")
  52. @ConfigurationProperties (prefix = "spring.jpa.primary")
  53. public JpaProperties jpaProperties() {
  54. return new JpaProperties();
  55. }
  56. /**
  57. * 获取主库实体管理工厂对象
  58. *
  59. * @param primaryDataSource 注入名为primaryDataSource的数据源
  60. * @param jpaProperties 注入名为primaryJpaProperties的jpa配置信息
  61. * @param builder 注入EntityManagerFactoryBuilder
  62. * @return 实体管理工厂对象
  63. */
  64. @Primary
  65. @Bean(name = "primaryEntityManagerFactory")
  66. public LocalContainerEntityManagerFactoryBean entityManagerFactoryBean(
  67. @Qualifier ("primaryDataSource") DataSource primaryDataSource,
  68. @Qualifier("primaryJpaProperties") JpaProperties jpaProperties,
  69. EntityManagerFactoryBuilder builder
  70. ) {
  71. return builder
  72. // 设置数据源
  73. .dataSource(primaryDataSource)
  74. // 设置jpa配置
  75. .properties(jpaProperties.getProperties())
  76. // 设置实体包名
  77. .packages(ENTITY_PACKAGE)
  78. // 设置持久化单元名,用于@PersistenceContext注解获取EntityManager时指定数据源
  79. .persistenceUnit("primaryPersistenceUnit").build();
  80. }
  81. /**
  82. * 获取实体管理对象
  83. *
  84. * @param factory 注入名为primaryEntityManagerFactory的bean
  85. * @return 实体管理对象
  86. */
  87. @Primary
  88. @Bean(name = "primaryEntityManager")
  89. public EntityManager entityManager(@Qualifier("primaryEntityManagerFactory") EntityManagerFactory factory) {
  90. return factory.createEntityManager();
  91. }
  92. /**
  93. * 获取主库事务管理对象
  94. *
  95. * @param factory 注入名为primaryEntityManagerFactory的bean
  96. * @return 事务管理对象
  97. */
  98. @Primary
  99. @Bean(name = "primaryTransactionManager")
  100. public JpaTransactionManager transactionManager(@Qualifier("primaryEntityManagerFactory") EntityManagerFactory factory) {
  101. return new JpaTransactionManager(factory);
  102. }
  103. }

从库数据源配置

  1. @Configuration
  2. @EnableTransactionManagement
  3. @EnableJpaRepositories(
  4. basePackages = SecondaryDatasourceAndJpaConfig.REPOSITORY_PACKAGE,
  5. entityManagerFactoryRef = "secondaryEntityManagerFactory",
  6. transactionManagerRef = "secondaryTransactionManager"
  7. )
  8. public class SecondaryDatasourceAndJpaConfig {
  9. static final String REPOSITORY_PACKAGE = "com.jpa.dao.secondary";
  10. static final String ENTITY_PACKAGE = "com.jpa.entity.secondary";
  11. //--------------数据源配置-------------------
  12. /**
  13. * 扫描spring.datasource.secondary开头的配置信息
  14. *
  15. * @return 数据源配置信息
  16. */
  17. @Bean(name = "secondaryDataSourceProperties")
  18. @ConfigurationProperties(prefix = "spring.datasource.secondary")
  19. public DataSourceProperties dataSourceProperties() {
  20. return new DataSourceProperties();
  21. }
  22. /**
  23. * 获取次数据源对象
  24. *
  25. * @param dataSourceProperties 注入名为secondaryDataSourceProperties的bean
  26. * @return 数据源对象
  27. */
  28. @Bean("secondaryDataSource")
  29. public DataSource dataSource(@Qualifier("secondaryDataSourceProperties") DataSourceProperties dataSourceProperties) {
  30. return dataSourceProperties.initializeDataSourceBuilder().build();
  31. }
  32. /**
  33. * 该方法仅在需要使用JdbcTemplate对象时选用
  34. *
  35. * @param dataSource 注入名为secondaryDataSource的bean
  36. * @return 数据源JdbcTemplate对象
  37. */
  38. @Bean(name = "secondaryJdbcTemplate")
  39. public JdbcTemplate jdbcTemplate(@Qualifier("secondaryDataSource") DataSource dataSource) {
  40. return new JdbcTemplate(dataSource);
  41. }
  42. /**
  43. * 扫描spring.jpa.secondary
  44. *
  45. * @return jpa配置信息
  46. */
  47. @Bean(name = "secondaryJpaProperties")
  48. @ConfigurationProperties(prefix = "spring.jpa.secondary")
  49. public JpaProperties jpaProperties() {
  50. return new JpaProperties();
  51. }
  52. /**
  53. * 获取次库实体管理工厂对象
  54. *
  55. * @param secondaryDataSource 注入名为secondaryDataSource的数据源
  56. * @param jpaProperties 注入名为secondaryJpaProperties的jpa配置信息
  57. * @param builder 注入EntityManagerFactoryBuilder
  58. * @return 实体管理工厂对象
  59. */
  60. @Bean(name = "secondaryEntityManagerFactory")
  61. public LocalContainerEntityManagerFactoryBean entityManagerFactory(
  62. @Qualifier("secondaryDataSource") DataSource secondaryDataSource,
  63. @Qualifier("secondaryJpaProperties") JpaProperties jpaProperties,
  64. EntityManagerFactoryBuilder builder
  65. ) {
  66. return builder
  67. // 设置数据源
  68. .dataSource(secondaryDataSource)
  69. // 设置jpa配置
  70. .properties(jpaProperties.getProperties())
  71. // 设置实体包名
  72. .packages(ENTITY_PACKAGE)
  73. // 设置持久化单元名,用于@PersistenceContext注解获取EntityManager时指定数据源
  74. .persistenceUnit("secondaryPersistenceUnit").build();
  75. }
  76. /**
  77. * 获取实体管理对象
  78. *
  79. * @param factory 注入名为secondaryEntityManagerFactory的bean
  80. * @return 实体管理对象
  81. */
  82. @Bean(name = "secondaryEntityManager")
  83. public EntityManager entityManager(@Qualifier("secondaryEntityManagerFactory") EntityManagerFactory factory) {
  84. return factory.createEntityManager();
  85. }
  86. /**
  87. * 获取事务管理对象
  88. *
  89. * @param factory 注入名为secondaryEntityManagerFactory的bean
  90. * @return 事务管理对象
  91. */
  92. @Bean(name = "secondaryTransactionManager")
  93. public JpaTransactionManager transactionManager(@Qualifier("secondaryEntityManagerFactory") EntityManagerFactory factory) {
  94. return new JpaTransactionManager(factory);
  95. }
  96. }

声明式事务

错误写法

  1. @Service
  2. public class TestService {
  3. @Resource
  4. JdbcTemplate primaryJdbcTemplate;
  5. @Resource
  6. JdbcTemplate secondaryJdbcTemplate;
  7. @Transactional
  8. public void method() {
  9. //do something 1
  10. primaryJdbcTemplate.execute("insert into user(username, password) values('张三', '123456')");
  11. //do something 2
  12. secondaryJdbcTemplate.execute("insert into user(username, password) values('李四', '123456');");
  13. //do something 3
  14. }
  15. }

@Transactional中没有指定事务管理器,这在单数据源系统中就不会有任何问题,在单数据源系统中,整个Spring容器中只定义了一个事务管理器,Spring启动事务的时候,默认会按类型在容器中查找事务管理器,而容器中就只有一个事务管理器,正好拿来用,不会有问题。

但是在多数据源系统中,Spring容器中是会存在多个事务管理器的,如果不指定事务管理器,如果使用的事务管理器和实际操作的数据源不一致的话,是管理不了事务的(由于配置主库数据源使用@primary注解,所有默认会使用主库的事务管理器),所以在数据源系统中使用声明式事务,必须指定事务管理器

上面代码将两个数据库操作都放在同一个方法中,无论拿到了哪个事务管理器,只要 do something 3 处发生了异常,那么其中的一个事务是不会回滚的

改进写法

  1. @Service
  2. public class TestService {
  3. @Resource
  4. JdbcTemplate primaryJdbcTemplate;
  5. @Resource
  6. JdbcTemplate secondaryJdbcTemplate;
  7. @Transactional(value = "primaryTransactionManager")
  8. public void method1() {
  9. //do something 1
  10. primaryJdbcTemplate.execute("insert into user(username, password) values('张三', '123456')");
  11. //do something 2
  12. method2();
  13. //do something 5
  14. }
  15. @Transactional(value = "secondaryTransactionManager")
  16. public void method2() {
  17. //do something 3
  18. secondaryJdbcTemplate.execute("insert into user(username, password) values('李四', '123456');");
  19. //do something 4
  20. }
  21. }

改进的写法,将不同数据源的操作拆到不同的方法中,分别加上了@Transactional注解,并指定了对应的事务管理器。这种写法相对之前的就规范了不少,但是还是存在问题,如果在 do something 5 处发生了异常,因为 method2 方法已经执行结束了,事务已经提交了,所以还是无法做到一起回滚。

编程式事务

  1. @Service
  2. public class TestService {
  3. @Resource
  4. JdbcTemplate primaryJdbcTemplate;
  5. @Resource
  6. JdbcTemplate secondaryJdbcTemplate;
  7. @Resource
  8. PlatformTransactionManager primaryTransactionManager;
  9. @Resource
  10. PlatformTransactionManager secondaryTransactionManager;
  11. public void method() {
  12. TransactionDefinition primaryDef = new DefaultTransactionDefinition();
  13. TransactionStatus primaryStatus = primaryTransactionManager.getTransaction(primaryDef);
  14. TransactionDefinition secondaryDef = new DefaultTransactionDefinition();
  15. TransactionStatus secondaryStatus = secondaryTransactionManager.getTransaction(secondaryDef);
  16. try {
  17. //do something 1
  18. primaryJdbcTemplate.execute("insert into user(username, password) values('张三', '123456')");
  19. //do something 2
  20. secondaryJdbcTemplate.execute("insert into user(username, password) values('李四', '123456');");
  21. //do something 3
  22. primaryTransactionManager.commit(primaryStatus);
  23. secondaryTransactionManager.commit(secondaryStatus);
  24. } catch (Exception e) {
  25. primaryTransactionManager.rollback(primaryStatus);
  26. secondaryTransactionManager.rollback(secondaryStatus);
  27. throw new RuntimeException(e.getMessage());
  28. }
  29. }
  30. }

编程式事务的颗粒度时代码级别的,可以嵌入到方法里面,这样可以控制不同数据源的事务同时开启,一旦出现异常,则两个事务一起回滚,这样就保证了多数据事务的一致性。

这种实现实际上和分布式事务的XA模式思想一样,只不过分布式事务管理的是分布式系统中不同服务不同的数据源,而这里是一个服务同一个方法中操作多个数据源。本质上都是处理管理多数据源的事务。

标签: spring boot 后端 java

本文转载自: https://blog.csdn.net/typeracer/article/details/141431028
版权归原作者 编程经验分享 所有, 如有侵权,请联系我们删除。

“Spring Boot 同一个方法中操作多个数据源保证事务一致性”的评论:

还没有评论