【java-01】springboot利用sharding jdbc实现读写分离

写在开头

打算把自己的java后端学习过程分享给大家,也方便之后自己回顾。从这里开始~
目前在学习黑马的瑞吉外卖新手入门项目,这篇随笔记录的是项目优化之一读写分离

先列出大概的步骤

  1. 在vmware上创建两个linux虚拟机,配置静态ip并安装mysql数据库;
  2. 在两个linux虚拟机的mysql数据库之间完成主从复制[1]相关配置,并准备spring项目相关数据库数据;
  3. 在spring项目中添加sharding jdbc[2]的maven依赖,在配置文件中添加相关配置,利用主从复制完成读写分离[3]

一、linux准备

二、linux配置

配置-主库Master

  1. 添加或修改Mysql数据库的配置文件 /etc/my.cnf

    • [mysqld]
    • log-bin=mysql-bin #[必须]启用二进制日志
    • server-id=100 #[必须]服务器唯一ID[4]
  2. 重启Mysql服务

    • systemctl restart mysqld
  3. 登录Mysql数据库,执行下面SQL

    • grant replication slave on *.* to 'name'@'%' identified by 'password';

    注:【password默认长度需要超过8个字符,且至少有一个字母、一个数字和一个特殊字符】关于密码校验更多可参考软件安装mysql密码校验部分。上面SQL的作用是创建一个用户name,密码为password,并且给name用户授予REPLICATION SLAVE权限,拥有该权限的用户才可以进行主从复制,博主这里将REPLICATION SLAVE改为ALL授予了其所有权限。

  4. 登录Mysql数据库,执行下面SQL,记录下结果中File和Position的值

    • show master status;

    注:上面SQL的作用是查看Master的状态,执行完此SQL后不要再执行任何操作

配置-从库Slave

  1. 修改Mysql数据库的配置文件 /etc/my.cnf

    • server-id=101 #[必须]服务器唯一ID[4:1]
  2. 重启Mysql服务

    • systemctl restart mysqld
  3. 登录Mysql数据库,执行下面SQL

    • change master to master_host='192.168.132.100' ,master_user='name' ,master_password='password' ,master_log_file='xxxxx' ,master_log_pos=xxxxx;

    ps:file和pos根据主库第四步查到的内容填写

  4. 开启服务

    • start slave; #开启slave (stop slave; #停止slave)
  5. 查看是否成功

    • show slave status \G;

    以下状态都为Yes则配置成功:

    • Slave_IO_Running: Yes
    • Slave_SQL_Running: Yes

数据迁移

  1. 利用navicat软件,在源数据库上右击,选择转储SQL
  2. 在master主库创建相同数据库,之后右击数据库选运行SQL

三、spring相关

  • 导入maven坐标
        <dependency>
            <groupId>org.apache.shardingsphere</groupId>
            <artifactId>sharding-jdbc-spring-boot-starter</artifactId>
            <version>4.0.0-RC1</version>
        </dependency>
  • 在配置文件中完成相关配置,博主使用yml文件配置
spring:
  shardingsphere:
    datasource:
      names:
        master,slave
      # 主数据源
      master:
        type: com.alibaba.druid.pool.DruidDataSource
        driver-class-name: com.mysql.cj.jdbc.Driver
        url: jdbc:mysql://192.168.132.100:3306/你的数据库名称?characterEncoding=utf-8
        username: xxxx
        password: xxxx
      # 从数据源
      slave:
        type: com.alibaba.druid.pool.DruidDataSource
        driver-class-name: com.mysql.cj.jdbc.Driver
        url: jdbc:mysql://192.168.132.101:3306/你的数据库名称?characterEncoding=utf-8
        username: xxxx
        password: xxxx
    masterslave:
      # 从库负载均衡策略
      load-balance-algorithm-type: round_robin #轮询
      # 最终的数据源名称
      name: dataSource
      # 主库数据源名称
      master-data-source-name: master
      # 从库数据源名称列表,多个逗号分隔
      slave-data-source-names: slave
    props:
      sql:
        show: true #开启SQL显示,默认false

  main:
    allow-bean-definition-overriding: true  #允许bean定义覆盖



  1. MySQL主从复制是一个异步的复制过程,底层是基于Mysql数据库自带的二进制日志功能。就是一台或多台MySQL数据库(slave,即从库)从另一台MySQL数据库(master,即主库)进行日志的复制然后再解析日志并应用到自身,最终实现从库的数据和主库的数据保持一致。MySQL主从复制是MysQL数据库自带功能,无需借助第三方工具。MySQL复制过程分成三步:① master将改变记录到二进制日志(binary log);② slave将master的binary log拷贝到它的中继日志(relay log);③ slave重做中继日志中的事件,将改变应用到自己的数据库中。 ↩︎

  2. Sharding-JDBC定位为轻量级Java框架,在Java的JDBC层提供的额外服务。它使用客户端直连数据库,以jar包形式提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动,完全兼容JDBC和各种ORM框架。使用Sharding-JDBC可以在程序中轻松的实现数据库读写分离。 ↩︎

  3. 面对日益增加的系统访问量,数据库的吞吐量面临着巨大瓶颈。对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说,将数据库拆分为主库和从库,主库负责处理事务性的增删改操作,从库负责处理查询操作,能够有效的避免由数据更新导致的行锁,使得整个系统的查询性能得到极大的改善。 ↩︎

  4. id填什么都行,不重复即可,可以参考该文章 ↩︎ ↩︎

posted @ 2022-12-13 11:19  叶湘伦配锅包肉  阅读(83)  评论(0编辑  收藏  举报