聊聊Spring的主从数据库配置

在应对日渐复杂的业务环境,单个数据库所能承载的压力已经远远不够。很多业务中诞生了主从数据库的架构模型,将数据读写进行分离,主库写,从库读,以提升服务的吞吐量。

在进行代码设计的时候,我们很自然会想到一个问题,一个业务操作,往往会包括读 和 写,例如在实现一个阅读点击量的简单需求的时候,是不是需要先查询一下原来有多少点击量Num,然后再给这个获取到的数据Num进行+1操作呢?

那么问题来了:

如果很多人同时点击,都在给这个Num进行+1,咱们姑且不论数据没办法实现真实稳定的问题。就单从主库和从库切换上来说,是不是已经会产生问题呢?

仔细分析一下,假如用户A此时在调用接口读取数据,而用户B在调用接口进行写。这个时候会有两种情况出现,数据库操作全局变量在经过A操作之后,变成了从库,那么这时候B写的时候就会写到从库里面了。第二种情况是,A还没有完成读取从库的行为,B将全局变量设置为主库,数据能够正常写入主库,但是问题也出现了,此时A读取数据的时候可能就是主库了,读写分离的意义也就荡然无存了。而线上实际情况,往往比这个复杂一点。在我经历的项目中,读写数据的行为稍有不当,可能带来的是项目的巨大损失。

回顾一下上篇文章:为什么建议多用下ThreadLocal

我提到过,ThreadLocal是线程安全的,借助ThreadLocal,我们可以比较好的规避上面的这个问题。聪明的你一定马上会想到,对了,把这个数据库切换的全局变量,变成一个线程的“本地”变量,不就安全多了吗?

 

下面我们来简单写个实现类

主从库切换类,基于ThreadLocal实现调用接口线程的安全性。

public class DynamicDataSource extends AbstractRoutingDataSource {

    private final static Logger LOGGER = LoggerFactory.getLogger(DynamicDataSource.class);
    private static final ThreadLocal<String> CONTEXT_HOLDER = new ThreadLocal<>();
@Override
protected Object determineCurrentLookupKey() {
String dataSource
= getDataSource();return dataSource; } /** * 设置数据源 * * @param dataSource */ public static void setDataSource(String dataSource) {
CONTEXT_HOLDER.set(dataSource); } /** * 获取数据源 * */ public static String getDataSource() {
String dataSource
= CONTEXT_HOLDER.get();
// 如果没有指定数据源,使用默认数据源 if (null == dataSource) { DynamicDataSource.setDataSource(DataSourceEnum.MASTER.getDefault()); } return CONTEXT_HOLDER.get(); } /** * 清除数据源 */ public static void clearDataSource() {
CONTEXT_HOLDER.remove(); } }

 

>> 当需要进行数据库操作的时候,调用

DynamicDataSource.setDataSource(DataSourceEnum.MASTER.getName());
或者 DynamicDataSource.setDataSource(DataSourceEnum.SLAVE.getName());

切换数据库;

>> 用完了,调用

DynamicDataSource.clearDataSource();

以便下一次继续使用

 

其他关联数据和配置:

主从库枚举:

public enum DataSourceEnum {

    // 主库
    MASTER("masterDataSource", true),
    // 从库
    SLAVE("slaveDataSource", false),;

    // 数据源名称
    private String name;
    // 是否是默认数据源
    private boolean master;

    DataSourceEnum(String name, boolean master) {
        this.name = name;
        this.master = master;
    }

    public String getName() {
        return name;
    }

    public void setName(String name) {
        this.name = name;
    }

    public boolean isMaster() {
        return master;
    }

    public void setMaster(boolean master) {
        this.master = master;
    }

    public String getDefault() {
        String defaultDataSource = "";
        for (DataSourceEnum dataSourceEnum : DataSourceEnum.values()) {
            if (!"".equals(defaultDataSource)) {
                break;
            }
            if (dataSourceEnum.master) {
                defaultDataSource = dataSourceEnum.getName();
            }
        }
        return defaultDataSource;
    }

}

 

主从库的配置如下:

    <!-- 主库数据源 -->
    <bean id="masterDataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init"
          destroy-method="close">
        <!-- 基本属性 url、user、password -->
        <property name="driverClassName" value="${master.jdbc.driver}"/>
        <property name="url" value="${master.jdbc.url}"/>
        <property name="username" value="${master.jdbc.username}"/>
        <property name="password" value="${master.jdbc.password}"/>
        <!-- 配置初始化大小、最小、最大 -->
        <property name="initialSize" value="1"/>
        <property name="minIdle" value="1"/>
        <property name="maxActive" value="20"/>
        <!-- 配置获取连接等待超时的时间 -->
        <property name="maxWait" value="60000"/>
        <!-- 配置间隔多久才进行一次检测,检测需要关闭的空闲连接,单位是毫秒 -->
        <property name="timeBetweenEvictionRunsMillis" value="60000"/>
        <!-- 配置一个连接在池中最小生存的时间,单位是毫秒 -->
        <property name="minEvictableIdleTimeMillis" value="300000"/>
        <!-- 校验语句 -->
        <property name="validationQuery" value="SELECT 1"/>
        <property name="testWhileIdle" value="true"/>
        <property name="testOnBorrow" value="false"/>
        <property name="testOnReturn" value="false"/>
        <!-- 配置监控统计拦截的filters -->
        <property name="filters" value="stat"/>
    </bean>

    <!-- 从库数据源 -->
    <bean id="slaveDataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init" destroy-method="close">
        <!-- 基本属性 url、user、password -->
        <property name="driverClassName" value="${slave.jdbc.driver}"/>
        <property name="url" value="${slave.jdbc.url}"/>
        <property name="username" value="${slave.jdbc.username}"/>
        <property name="password" value="${slave.jdbc.password}"/>
        <!-- 配置初始化大小、最小、最大 -->
        <property name="initialSize" value="1"/>
        <property name="minIdle" value="1"/>
        <property name="maxActive" value="20"/>
        <!-- 配置获取连接等待超时的时间 -->
        <property name="maxWait" value="60000"/>
        <!-- 配置间隔多久才进行一次检测,检测需要关闭的空闲连接,单位是毫秒 -->
        <property name="timeBetweenEvictionRunsMillis" value="60000"/>
        <!-- 配置一个连接在池中最小生存的时间,单位是毫秒 -->
        <property name="minEvictableIdleTimeMillis" value="300000"/>
        <!-- 校验语句 -->
        <property name="validationQuery" value="SELECT 1"/>
        <property name="testWhileIdle" value="true"/>
        <property name="testOnBorrow" value="false"/>
        <property name="testOnReturn" value="false"/>
        <!-- 配置监控统计拦截的filters -->
        <property name="filters" value="stat"/>
    </bean>

 

好了 ,代码虽然看起来挺简单的,但也能说明ThreadLocal在实现读写分离时候的有它一席用武之地咯。实际应用场景,会有更复杂的处理。

备注:此案例借用了网上的一些资源,做了简化处理,只作为演示说明使用。

 

posted @ 2022-08-07 15:27  2015夏  阅读(571)  评论(0编辑  收藏  举报