【java-01】springboot利用sharding jdbc实现读写分离
写在开头
打算把自己的java后端学习过程分享给大家,也方便之后自己回顾。从这里开始~
目前在学习黑马的瑞吉外卖新手入门项目,这篇随笔记录的是项目优化之一读写分离
先列出大概的步骤
- 在vmware上创建两个linux虚拟机,配置静态ip并安装mysql数据库;
- 在两个linux虚拟机的mysql数据库之间完成主从复制[1]相关配置,并准备spring项目相关数据库数据;
- 在spring项目中添加sharding jdbc[2]的maven依赖,在配置文件中添加相关配置,利用主从复制完成读写分离[3]。
一、linux准备
-
Linux配置ip相关
博主设置的ip为192.168.132.100和192.168.132.101 -
Linux安装MySQL数据库相关
以100为主库master,101为从库slave。
二、linux配置
配置-主库Master
-
添加或修改Mysql数据库的配置文件 /etc/my.cnf
- [mysqld]
- log-bin=mysql-bin #[必须]启用二进制日志
- server-id=100 #[必须]服务器唯一ID[4]
-
重启Mysql服务
- systemctl restart mysqld
-
登录Mysql数据库,执行下面SQL
grant replication slave on *.* to 'name'@'%' identified by 'password';
注:【password默认长度需要超过8个字符,且至少有一个字母、一个数字和一个特殊字符】关于密码校验更多可参考软件安装mysql密码校验部分。上面SQL的作用是创建一个用户name,密码为password,并且给name用户授予REPLICATION SLAVE权限,拥有该权限的用户才可以进行主从复制,博主这里将REPLICATION SLAVE改为ALL授予了其所有权限。
-
登录Mysql数据库,执行下面SQL,记录下结果中File和Position的值
- show master status;
注:上面SQL的作用是查看Master的状态,执行完此SQL后不要再执行任何操作
配置-从库Slave
-
修改Mysql数据库的配置文件 /etc/my.cnf
- server-id=101 #[必须]服务器唯一ID[4:1]
-
重启Mysql服务
- systemctl restart mysqld
-
登录Mysql数据库,执行下面SQL
- change master to master_host='192.168.132.100' ,master_user='name' ,master_password='password' ,master_log_file='xxxxx' ,master_log_pos=xxxxx;
ps:file和pos根据主库第四步查到的内容填写
-
开启服务
- start slave; #开启slave (stop slave; #停止slave)
-
查看是否成功
- show slave status \G;
以下状态都为Yes则配置成功:
- Slave_IO_Running: Yes
- Slave_SQL_Running: Yes
数据迁移
- 利用navicat软件,在源数据库上右击,选择转储SQL
- 在master主库创建相同数据库,之后右击数据库选运行SQL
三、spring相关
- 导入maven坐标
<dependency>
<groupId>org.apache.shardingsphere</groupId>
<artifactId>sharding-jdbc-spring-boot-starter</artifactId>
<version>4.0.0-RC1</version>
</dependency>
- 在配置文件中完成相关配置,博主使用yml文件配置
spring:
shardingsphere:
datasource:
names:
master,slave
# 主数据源
master:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://192.168.132.100:3306/你的数据库名称?characterEncoding=utf-8
username: xxxx
password: xxxx
# 从数据源
slave:
type: com.alibaba.druid.pool.DruidDataSource
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://192.168.132.101:3306/你的数据库名称?characterEncoding=utf-8
username: xxxx
password: xxxx
masterslave:
# 从库负载均衡策略
load-balance-algorithm-type: round_robin #轮询
# 最终的数据源名称
name: dataSource
# 主库数据源名称
master-data-source-name: master
# 从库数据源名称列表,多个逗号分隔
slave-data-source-names: slave
props:
sql:
show: true #开启SQL显示,默认false
main:
allow-bean-definition-overriding: true #允许bean定义覆盖
MySQL主从复制是一个异步的复制过程,底层是基于Mysql数据库自带的二进制日志功能。就是一台或多台MySQL数据库(slave,即从库)从另一台MySQL数据库(master,即主库)进行日志的复制然后再解析日志并应用到自身,最终实现从库的数据和主库的数据保持一致。MySQL主从复制是MysQL数据库自带功能,无需借助第三方工具。MySQL复制过程分成三步:① master将改变记录到二进制日志(binary log);② slave将master的binary log拷贝到它的中继日志(relay log);③ slave重做中继日志中的事件,将改变应用到自己的数据库中。 ↩︎
Sharding-JDBC定位为轻量级Java框架,在Java的JDBC层提供的额外服务。它使用客户端直连数据库,以jar包形式提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动,完全兼容JDBC和各种ORM框架。使用Sharding-JDBC可以在程序中轻松的实现数据库读写分离。 ↩︎
面对日益增加的系统访问量,数据库的吞吐量面临着巨大瓶颈。对于同一时刻有大量并发读操作和较少写操作类型的应用系统来说,将数据库拆分为主库和从库,主库负责处理事务性的增删改操作,从库负责处理查询操作,能够有效的避免由数据更新导致的行锁,使得整个系统的查询性能得到极大的改善。 ↩︎