MariaDB主从复制,redis发布订阅,持久化,以及主从同步

时间:2021-02-24 17:49:43
 

一. MariaDB主从复制

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

mysql基本操作

1 连接数据库

mysql -u root -p -h 127.0.0.1
mysql -u root -p -h 192.168.12.60

2 授予远程连接的权限

grant all privileges on *.* to root@"%" identified by "centos"

3 修改root用户的密码

先进入mysql的交互式模式
set password = PASSWORD('centos');

4 创建mysql用户

create user liulaoshi@"%" identified by "lls666"

5 给予刘老师查询所有库和所有表的权限

grant select on *.* to liulaoshi@"%" identified by "lls666"

6.查询mysql库中的用户信息

use mysql;
select host,user,password from user;

7.再给刘老师创建所有库和所有表的权限, 再给修改权限,再加上删除权限

grant create on *.* to liulaoshi@"%" identified by "lls666"
grant update on *.* to liulaoshi@"%" identified by "lls666"
grant delete on *.* to liulaoshi@"%" identified by "lls666"

8 授予mysql权限的语法

mysql使用grant命令对账户进行授权,grant命令常见格式如下

grant 权限 on 数据库.表名 to 账户@主机名 对特定数据库中的特定表授权
grant 权限 on 数据库.* to 账户@主机名   对特定数据库中的所有表给与授权
grant 权限1,权限2,权限3 on *.* to 账户@主机名    对所有库中的所有表给与多个授权
grant all privileges on *.* to 账户@主机名    对所有库和所有表授权所有权限

9 移除刘老师的创建权限

revoke create on *.* from xiaochun@"%" identified by 'lls666';
revoke delete on *.* from xiaochun@"%" identified by 'lls666';

10.数据库的备份与恢复 #备份

mysqldump -u root -p --all-databases > /tmp/db.sql

备份单个数据库

mysqldump -u root -p luffycity > /tmp/luffycity.sql

#数据导入,方式有3种

第一种方法:

进入mysql交互模式
source /tmp/luffycity.sql;

第二种方法

mysql -u root -p < /tmp/luffycity.sql

第三种方法

navicat 第三方工具

mariadb主从复制

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

步骤详解:

1. 主数据库写入数据之后, 会有data changes(数据变化)记录
2. 有变化记录之后,将增删改的一些sql语句记录到本地的Binary log(二进制日志)中
3. 从库会一直开启着一个线程
4. 通过线程去读取这个二进制日志的内容
5. 从库会将数据写入到自己的Relay log(中继日志)中
6. 从库会将中继日志中的操作转化为SQL thread(SQL语句)
7. 通过转化的SQL语句写入到自己的数据库, 两边的数据就一致了

mysql主从复制部署

1 准备两台机器

192.168.12.60   # 主服务器master(可读可写)
192.168.12.71 # 从服务器slave(可读)
实际工作中数据库读取操作比较多,由于从服务器是读,所以从服务器的配置要强悍一些

2 两台机器上分别安装mariadb数据库

192.168.12.60
用户名: root
密码: centos

192.168.12.71
用户名: root
密码: centos

配置主数据库

3 在主数据库(192.168.12.56)上操作

停mariadb
systemctl stop mariadb

4 修改主数据库的配置文件

vim /etc/my.cnf
添加以下内容
[mysqld] # 如果配置文件里面有这一行,就只需要加以下两行配置就可以了
server-id=1
log-bin=qishi2-logbin

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

5 重启主数据库

systemctl restart mariadb

6 创建主从复制用户账号

create user 'pig'@'%' identified by 'centos';

7 给从库账号授权,说明给tiger从库复制的权限,在10.0.0.8机器上复制

grant replication slave on *.* to 'pig'@'%';

8 实现对主数据库锁表只读,防止数据写入,数据复制失败

flush table with read lock;

9 查看并记录主数据库的状态

show master status;

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

10 确认主数据库是否已经成功锁表

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

11 导出主数据库的数据为alldb.sql

mysqldump -u root -p --all-databases > /opt/alldb.sql

12 把这个数据库文件拷贝到从数据库的/opt目录下

scp /opt/alldb.sql 192.168.12.71:/opt/

配置从数据库

13 停止从数据库服务

systemctl stop mariadb

14 修改从数据库的配置文件

vim /etc/my.cnf
添加以下配置
[mysqld]
server-id=5
read-only=true
MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

15 启动从数据库服务

systmectl start mariadb

16 在从 库上导入主数据库数据

mysql -u root -p
source /opt/alldb.sql

17 现在,主从两台数据库的数据就完全一致

18 配置复制的参数,Slave从库连接Master主库的配置(最重要的一步)

change master to master_host='192.168.12.60',
master_user='pig',
master_password='centos',
master_log_file='qishi2-logbin.000001',
master_log_pos=466;

19 启动从库的同步开关,测试主从复制的情况

start slave

20 查看从库的状态

MariaDB主从复制,redis发布订阅,持久化,以及主从同步


MariaDB主从复制,redis发布订阅,持久化,以及主从同步

在主库上操作

21 导出数据完毕,并配置好从库开启主从同步后,再解锁主库,恢复可写;

unlock tables;

22 验证主从复制情况

在主库上创建数据,查看从库数据同步状态

23 在主库上给予qihang用户select的权限, 并刷新授权表

grant select on *.* to pig@"%" identified by "centos";
flush privileges;

24 在从库上登录qihang用户, 并尝试创建一个库

create database aaaa;

ERROR 1290 (HY000): The MariaDB server is running with the --read-only option so it cannot execute this statement

25 验证主从读写分离状态

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

26 从库上提示read-only表示主从同步读写分离已经成功完成

二. redis发布订阅和持久化

redis发布订阅

发布者

publish xinwen 66nouyou

订阅者

sub

redis 持久化

redis是一个内存型的数据库

断电数据会消失

重启服务数据会消失

重启服务器数据会消失

mysql的数据存在硬盘中,但是数据是存在哪个路径下呢?

/var/lib/mysql

redis持久化之 RDB

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

RDB持久化配置:

1 创建redis配置文件

vim /opt/redis_conf/reids-6379.conf

写入以下配置

port 6379
daemonize yes
dir /opt/data/6379
pidfile /opt/data/6379/redis.pid
loglevel notice
logfile "/opt/data/6379/redis.log"
protected-mode yes
dbfilename dbmp.rdb
save 900 1
save 300 10
save 60 10000

2 进入redis 数据库,创建几条数据,并使用save命令开启rdb持久化

redis-cli

set name liujie
set age 18
set sex nam

save # 开启rdb持久化, 也可以不用

redis AOF持久化

1 修改reids配置文件

vim /opt/redis_conf/redis-6379.con
加入以下两行配置
appendonly yes
appendfsync everysec

保存退出

2 重启redis服务

pkill reids
redis-server /opt/redis_conf/redis-6379.conf

3 验证appendonly.aof文件里面的数据和redis里面的数据是否健在

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

redis不重启,从RDB切换到AOF

1 配置RDB持久化,确保没有AOF的配置

daemonize yes
port 6379
logfile /data/6379/redis.log
dir /data/6379
dbfilename dbmp.rdb
save 900 1 #rdb机制 每900秒 有1个修改记录
save 300 10 #每300秒 10个修改记录
save 60 10000 #每60秒内 10000修改记录

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

2启动redis服务端

redis-server redis.conf

3 登录redis-cli插入数据,手动持久化

127.0.0.1:6379> set name tiger
OK
127.0.0.1:6379> set age 18
OK
127.0.0.1:6379> set addr daxuecheng
OK
127.0.0.1:6379> save
OK

4 检查RDB文件

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

5 备份RDB文件

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

6 执行命令,开启AOF持久化

CONFIG set appendonly yes   # 开启AOF功能

CONFIG SET save "" # 关闭RDB功能

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

7 验证旧的RDB数据库数据是否转入AOF, 以及AOF持久化文件是否正常写入

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

三. redis主从同步

1 准备三个redis配置文件

cd /opt/redis_conf

redis-6380.conf   # 主数据库master
redis-6381.conf # 从库slave
redis-6382.conf # 从库slave

2 写入以下配置

port 6380
daemonize yes
pidfile /opt/data/6380/redis.pid
loglevel notice
logfile "/opt/data/6380/redis.log"
dbfilename dump.rdb
dir /opt/data/6380
protected-mode no

3 目前这三个配置文件配置一样,只是端口的不同

可以使用这一条命令通过redis-6380.conf生成6381和6382的配置文件
sed "s/6380/6381/g" redis-6380.conf > redis-6381.conf
sed "s/6380/6382/g" redis-6380.conf > redis-6382.conf

4 在6381和6382下添加以下配置,使之成为从数据库

slaveof 127.0.0.1 6380

可以使用以下一行命令直接追加写入到配置文件中

echo "slaveof 127.0.0.1 6380" >> redis-6381.conf

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

5 确认三个配置文件无误

6 开启这三个redis服务,确保三个服务启动正常

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

7 查看redis主从数据库的状态

redis-cli -p 6380 info replication
redis-cli -p 6381 info replication
redis-cli -p 6382 info replication

8 验证redis主从复制情况

(1)先验证三个数据库是否能正常连接

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

(2) 在6380上面写入数据,查看6381和6382是否能够正常同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

9 手动进行主从复制故障切换

(1) 杀掉6380的进程,模拟主库故障

kill -9 进程ID

(2)在6381和6382上手动指定一个主库(我现在指定6382为主库)

(3) 在6382的redis上执行这一行命令

slaveof no one

(4) 在6381上执行以下命令,将原来的指向6380改为指向6382

原来的配置指向:

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

执行命令:

slaveof no one
slaveof 127.0.0.1 6382

(5) 验证新的主从架构状态

查看主从信息
  info replication

在6382上查看主从信息

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

再到6381上面查看主从信息

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

(6) 验证新的主从架构是否可以正常写入数据,同步数据

如果可以,说明主从正常

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

MariaDB主从复制,redis发布订阅,持久化,以及主从同步

详细可参考: mariadb:主从复制:https://www.cnblogs.com/tiger666/articles/10259269.html

          持久化rdb以及AOF:https://www.cnblogs.com/tiger666/articles/10351619.html