文章只负责讲解sharding的相关配置,springboot其他的配置自己解决!!
文章内容将分开发布,便于平时查阅。
集成多数据源动态切换
- 为什么有了sharding还要配置多数据源?
根据之前SpringBoot集成ShardingJDBC系列【2】—— 基于yaml基本配置这篇文章中提到过这个问题,对于只有部分数据库分库分表,为什么需要将不分库分表的表也配置在分片规则中。
因为ShardingSphere是将多个数据源合并为一个统一的逻辑数据源。因此即使不分库分表的部分,不配置分片规则ShardingSphere即无法精确的断定应该路由至哪个数据源。 但是ShardingSphere提供了两种变通的方式,有助于简化配置。
方法一:配置default-data-source,凡是在默认数据源中的表可以无需配置在分片规则中,ShardingSphere将在找不到分片数据源的情况下将表路由至默认数据源。
缺点:这种方法有一个致命的缺点,就是如果查询的表不在设置的默认数据源中,还是需要将表配置到分片规则中。除非你的需求是决定将所有不需要进行分片的表都放在默认数据源里,那么倒是可以这么做,否则你就得一个一个配置表的分片规则了。
方法2:将不参与分库分表的数据源独立于ShardingSphere之外,在应用中使用多个数据源分别处理分片和不分片的情况。
优点:将不分片的数据源独立出来,开发者可以通过多数据源自主选择处理不同情况,仅需要简单配置后加个注解即可。我接下来所要讲的就是这个!!!
- 添加多数据源的依赖和配置:
这里选择的是baomidou团队开发的一个基于springboot的快速集成多数据源的启动器,详细文档可前往官方文档介绍。
(1)依赖:
<dependency>
<groupId>com.baomidou</groupId>
<artifactId>dynamic-datasource-spring-boot-starter</artifactId>
<version>${dynamic.datasource.version}</version>
</dependency>
<sharding.jdbc.version>4.1.0</sharding.jdbc.version>
(2)配置:
这里创建一个新的application-dynamic-datasource.yml文件,然后在application.yml的spring:profiles:include:引入即可,编辑如下:
spring:
datasource:
dynamic:
datasource:
master:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://localhost:3306/sharding_test_1?useUnicode=true&useSSL=false&characterEncoding=utf8&allowPublicKeyRetrieval=true&serverTimezone=Asia/Shanghai
username: root
password: 123456
slave:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://localhost:3306/sharding_test_2?useUnicode=true&useSSL=false&characterEncoding=utf8&allowPublicKeyRetrieval=true&serverTimezone=Asia/Shanghai
username: root
password: 123456
primary: master # 设置默认的数据源或者数据源组,默认值即为master
strict: false # 设置严格模式,默认false不启动. 启动后在未匹配到指定数据源时候会抛出异常,不启动则使用默认数据源
(3)集成Sharding:从上面那一步完成后,我们便可以通过@DS()注解来动态的选择数据源了。但是,也只能使用上面的master和slave两个数据源。如果要集成Sharding的话,也就是将Sharding数据源也加入到dynamic-datasource的管理中来。直接贴代码:
/**
* @author KLAY_
* @date 2020/09/03 14:43
*/
@Configuration
@AutoConfigureBefore({DynamicDataSourceAutoConfiguration.class,
SpringBootConfiguration.class})
public class DataSourceConfiguration {
/**
* 分表数据源名称
*/
private static final String SHARDING_DATASOURCE_NAME = "sharding";
/**
* 动态数据源配置项
*/
@Autowired
private DynamicDataSourceProperties properties;
/**
* shardingjdbc有四种数据源,需要根据业务注入不同的数据源
* 1. 未使用分片, 脱敏的名称(默认): shardingDataSource;
* 2. 主从数据源: masterSlaveDataSource;
* 3. 脱敏数据源:encryptDataSource;
* 4. 影子数据源:shadowDataSource
*/
@Lazy
@Resource(name = "shardingDataSource")
AbstractDataSourceAdapter shardingDataSource;
@Bean
public DynamicDataSourceProvider dynamicDataSourceProvider() {
Map<String, DataSourceProperty> datasourceMap = properties.getDatasource();
return new AbstractDataSourceProvider() {
@Override
public Map<String, DataSource> loadDataSources() {
Map<String, DataSource> map = createDataSourceMap(datasourceMap);
map.put(SHARDING_DATASOURCE_NAME, shardingDataSource); /// 这里将shardingjdbc管理的数据源交给dynamic-datasource动态数据源去管理
return map;
}
};
}
/**
* 将dynamic-datasource动态数据源设置为首选的
* 当spring存在多个数据源的时候,自动注入的是首选数据源
* 这样之后可以支持sharding-jdbc原生的配置方式
* @param dynamicDataSourceProvider
* @return
*/
@Primary
@Bean
public DataSource dataSource(DynamicDataSourceProvider dynamicDataSourceProvider) {
DynamicRoutingDataSource dataSource = new DynamicRoutingDataSource();
dataSource.setPrimary(properties.getPrimary());
dataSource.setStrict(properties.getStrict());
dataSource.setStrategy(properties.getStrategy());
dataSource.setProvider(dynamicDataSourceProvider);
dataSource.setP6spy(properties.getP6spy());
dataSource.setSeata(properties.getSeata());
return dataSource;
}
}
之后,我们对需要进行分片处理的表,则可以在类或者方法直接加上一个@DS(“sharding”)注解,即可进行分片处理;而对于不需要分片的表,我只需要@DS(“其他的数据源”)即可。
遇过的坑(注意):
@DS()注解的优先级上,方法优于类。
对于多数据源之间的事务、分布式事务,会存在一些问题。后续会再更新这一方便的。
事先说明,该系列下的所有文章均为作者查阅很多配置资料后整理得出,主要用于个人记录学习的配置资料不涉及原理,仅作参考。