前言
今天来学习数据库主从同步的原理及过程,数据库主要是用来存储web数据,在企业当中是极为重要的,下面一起来看下。
1.1 数据库做主从的目的
mysql主从复制在中小企业,大型企业中广泛使用,mysql主从复制的目的是实现数据库冗余备份,将master数据库数据定时同步到slave数据库中,一旦masker数据库宕机,可以将web应用数据库配置快速切换至slave数据库,确保web应用较高的可用率。
1.2 主从原理架构
mysql主从同步至少需要用到2台服务器,一台为master库,另一台为slave库,要实现复制首先需要在master上开启bin-log日志功能,bin-log日志用于记录在master库中执行的增、删、修改、更新操作的sql语句,整个过程需要开启3个线程,分别是master开启io线程,slave开启io线程和sql线程。
这个实验需要用到两台服务器,一台是主master,另一台是从slave,实验前的准备是两台服务器都需要操作的。
1.1 关闭selinux和防火墙
必要情况下,还是建议selinux进行关闭操作,防火墙可以视情况而定,自己做实验可以直接将防火墙给关了。
#关闭防火墙
systemctl stop firewalld
iptables -f
#关闭selinux
setenforce 0
1.2 查看本地ip
查看本地ip,并测试是否可以ping通www.baidu.com
ifconfig
192.168.116.166 #第一台服务器ip作为主master
192.168.116.128 #第二台服务器ip作为从slave
1.3 服务器 数据库版本
两台服务器版本皆为centos7.9
[root@localhost ~]# cat /etc/redhat-release
centos linux release 7.9.2009 (core)
数据库使用mysql8.0社区版本来做本次实验
rpm包下载地址
本次实验用到的rpm包–mysql8.0社区版–可直接点击前面的进行跳转,也可以直接复制这个链接:http://repo.mysql.com/mysql80-community-release-el7.rpm
表格形式显示:
服务器版本 | ip | 数据库版本 |
---|---|---|
centos7.9.2009 | 192.168.116.166(主master) | mysql8.0.32社区版 |
centos7.9.2009 | 192.168.116.128(从slave) | mysql8.0.32社区版 |
这里一样是需要两台服务器都要进行安装数据库的
2.1 清空centos7自带的包
在centos7中,默认会安装mariadb的文件和包,需要先将这些给删了,否则会影响到后续的安装。
#清空现有的mariadb和mysql相关的文件
[root@localhost ~]# rpm -qa | grep mysql
[root@localhost ~]# rpm -qa | grep mariadb
mariadb-libs-5.5.68-1.el7.x86_64
[root@localhost ~]# rpm -e mariadb-libs-5.5.68-1.el7.x86_64 --nodeps
接下来查找关于mysql和mariadb的文件进行删除。
[root@localhost ~]# find / -name mariadb
[root@localhost ~]# find / -name mysql
/etc/selinux/targeted/active/modules/100/mysql
/usr/lib64/mysql
[root@localhost ~]# rm -rf /etc/selinux/targeted/active/modules/100/mysql /usr/lib64/mysql
2.2 下载安装数据库8.0
在前面ag真人试玩娱乐官网复制的rpm源,使用wget进行下载,若wget命令没有,需要先下载wget命令。
–可直接复制
yum install wget -y
wget http://repo.mysql.com/mysql80-community-release-el7.rpm
rpm -ivh mysql80-community-release-el7.rpm
yum install mysql-community-server
安装好这几个之后,就可以直接启动服务了;
#启动服务
systemctl restart mysqld
2.3 查找初始化密码
两台的初始化密码都不一样,可以先查找出来后,将两台的数据库密码都修改成一样的。
#查找初始化密码
grep -i 'password' /var/log/mysqld.log
2023-03-23t06:39:43.463553z 6 [note] [my-010454] [server] a temporary password is generated for root@localhost: q_gkjqer1iga
数据库密码在冒号后面:q_gkjqer1iga
2.4 修改数据库密码
建议将两台数据库的密码都修改成一样的,方便后续的测试。
#使用密码登录数据库修改成新密码
[root@localhost ~]# mysql -uroot -p
enter password:
welcome to the mysql monitor. commands end with ; or \g.
your mysql connection id is 8
server version: 8.0.32
ag真人试玩娱乐 copyright (c) 2000, 2023, oracle and/or its affiliates.
oracle is a registered trademark of oracle corporation and/or its
affiliates. other names may be trademarks of their respective
owners.
type 'help;' or '\h' for help. type '\c' to clear the current input statement.
mysql> alter user 'root'@'localhost' identified by '#admin$5^!';
query ok, 0 rows affected (0.00 sec)
mysql> exit
bye
修改密码的语句
alter user 'root'@'localhost' identified by '#admin$5^!';
mysql8.0当中,密码需要修改的尽可能复杂才会通过,可以使用语句看下复杂的程度。
mysql> show variables like 'validate%';
-------------------------------------- --------
| variable_name | value |
-------------------------------------- --------
| validate_password.check_user_name | on |
| validate_password.dictionary_file | |
| validate_password.length | 8 |
| validate_password.mixed_case_count | 1 |
| validate_password.number_count | 1 |
| validate_password.policy | medium |
| validate_password.special_char_count | 1 |
-------------------------------------- --------
7 rows in set (0.00 sec)
是否开启用户密码校验
密码文件存放的位置
密码长度至少8位
大小写字母的个数至少1位
至少包含一个数字
设置密码的级别,默认级别为中等
至少包含一个字符
以上内容都是需要两台服务器都操作一遍的。
上面定义了主master为这台服务器ip:192.168.116.166
为了可以直观的看到在哪台服务器上进行,这里就修改一下主机名,这样就很容易区分。
3.1 临时修改主机名
[root@localhost ~]# hostname master
[root@localhost ~]# bash
[root@master ~]#
3.2 设置主数据库
创建数据库用户slave21,让它可以远程,并设置密码
[root@master ~]# mysql -uroot -p
enter password:
welcome to the mysql monitor. commands end with ; or \g.
your mysql connection id is 11
server version: 8.0.32 mysql community server - gpl
ag真人试玩娱乐 copyright (c) 2000, 2023, oracle and/or its affiliates.
oracle is a registered trademark of oracle corporation and/or its
affiliates. other names may be trademarks of their respective
owners.
type 'help;' or '\h' for help. type '\c' to clear the current input statement.
mysql> create user 'slave21'@'%' identified with mysql_native_password by '#slvae21!@3ll';
query ok, 0 rows affected (0.00 sec)
mysql> grant replication slave on *.* to 'slave21'@'%';
query ok, 0 rows affected (0.00 sec)
mysql> flush privileges;
query ok, 0 rows affected (0.00 sec)
mysql> show grants for 'slave21'@'%';
-------------------------------------------------
| grants for slave21@% |
-------------------------------------------------
| grant replication slave on *.* to `slave21`@`%` |
-------------------------------------------------
1 row in set (0.00 sec)
看着这图似乎很多内容,其实就只有几条语句;
create user 'slave21'@'%' identified with mysql_native_password by '#slvae21!@3ll';
这一条语句的意思就是创建一个slave21这个用户,用户的名称是可以自己定义的;@'%'表示可以使用远程登录数据库,
identified with mysql_native_password by
这个语句则是mysql8.0的固定写法,表示就是给他设置密码。
grant replication slave on *.* to 'slave21'@'%';
这条语句则是表示给这个用户授权数据库的权限,
*.*
基本上就是给所有权限,第一个*表示所有数据库,第二个是表示数据库表。
flush privileges;
这条语句表示刷新数据库,让之前设置的内容可以同步到数据库中。
show grants for 'slave21'@'%';
查看之前设置的权限是否已经写入到数据库中,有显示内容表示已经写入成功了。
3.3 修改数据库配置文件
[root@master ~]# vim /etc/my.cnf
[root@master ~]# sed 4, 4p -n /etc/my.cnf
[mysqld]
server-id=21
log-bin=mysql-bin
binlog_do_db=test
binlog_ignore_db=mysql
#重启服务
[root@master ~]# systemctl restart mysqld
server-id=21 数据库服务的唯一id
log-bin=mysql-bin 设置binlog日志的存放位置
binlog_do_db=test 设置进行同步的数据库,这条不写表示同步全部数据库
binlog_ignore_db=mysql 设置不进行同步的数据库
记得设置好之后,还有一句命令是需要重启服务的。
3.4 查看主master状态
设置好配置文件后,重新登录mysql数据库系统中查看master的信息。
[root@master ~]# !m
mysql -uroot -p
enter password:
welcome to the mysql monitor. commands end with ; or \g.
your mysql connection id is 8
server version: 8.0.32 mysql community server - gpl
ag真人试玩娱乐 copyright (c) 2000, 2023, oracle and/or its affiliates.
oracle is a registered trademark of oracle corporation and/or its
affiliates. other names may be trademarks of their respective
owners.
type 'help;' or '\h' for help. type '\c' to clear the current input statement.
mysql> show master status;
------------------ ---------- -------------- ------------------ -------------------
| file | position | binlog_do_db | binlog_ignore_db | executed_gtid_set |
------------------ ---------- -------------- ------------------ -------------------
| mysql-bin.000001 | 157 | test | mysql | |
------------------ ---------- -------------- ------------------ -------------------
1 row in set (0.00 sec)
为什么需要查看这个信息,因为配置slave从数据库的时候需要用到。
file 就是我们刚刚设置的log-bin的存放文件,用来记录mysql操作的日志文件。
position 表示是偏移量
binlog_do_db 需要进行同步的数据库
binlog_ignore_db 不进行同步的数据库
到这一步的时候,第一台master数据库就不要继续操作了,避免会变动偏移量。
这里需要到第二台服务器上进行操作了,这里也进行主机名的修改,增加辨识度。
4.1 临时修改主机名
[root@localhost ~]# hostname slave22
[root@localhost ~]# bash
[root@slave22 ~]#
4.2 修改配置文件
从服务器只需要写上唯一id即可,server-id=22
,这个id内容并不一定要和这上面的一样,只要不与上一台的id号一样,咋设置都行。
#mysql的配置文件
[root@slave22 ~]# vim /etc/my.cnf
[root@slave22 ~]# sed 4, 1p -n /etc/my.cnf
[mysqld]
server-id=22
[root@slave22 ~]# systemctl restart mysqld
千万不要忘记需要重启服务
4.3 绑定主master服务器
[root@slave22 ~]# mysql -uroot -p
enter password:
welcome to the mysql monitor. commands end with ; or \g.
your mysql connection id is 9
server version: 8.0.32 mysql community server - gpl
ag真人试玩娱乐 copyright (c) 2000, 2023, oracle and/or its affiliates.
oracle is a registered trademark of oracle corporation and/or its
affiliates. other names may be trademarks of their respective
owners.
type 'help;' or '\h' for help. type '\c' to clear the current input statement.
mysql> change master to master_host='192.168.116.166',master_user='slave21',master_password='#slvae21!@3ll',master_log_file='mysql-bin.000001',master_log_pos=157;
query ok, 0 rows affected, 8 warnings (0.01 sec)
mysql> start slave;
query ok, 0 rows affected, 1 warning (0.01 sec)
mysql> show slave status \g
*************************** 1. row ***************************
slave_io_state: waiting for source to send event
master_host: 192.168.116.166
master_user: slave21
master_port: 3306
connect_retry: 60
master_log_file: mysql-bin.000001
read_master_log_pos: 157
relay_log_file: localhost-relay-bin.000002
relay_log_pos: 326
relay_master_log_file: mysql-bin.000001
slave_io_running: yes
slave_sql_running: yes
replicate_do_db:
replicate_ignore_db:
replicate_do_table:
replicate_ignore_table:
replicate_wild_do_table:
replicate_wild_ignore_table:
last_errno: 0
last_error:
skip_counter: 0
exec_master_log_pos: 157
relay_log_space: 540
until_condition: none
until_log_file:
until_log_pos: 0
master_ssl_allowed: no
master_ssl_ca_file:
master_ssl_ca_path:
master_ssl_cert:
master_ssl_cipher:
master_ssl_key:
seconds_behind_master: 0
master_ssl_verify_server_cert: no
last_io_errno: 0
last_io_error:
last_sql_errno: 0
last_sql_error:
replicate_ignore_server_ids:
master_server_id: 21
master_uuid: 7d57e7f4-c945-11ed-b2a1-000c29b5625a
master_info_file: mysql.slave_master_info
sql_delay: 0
sql_remaining_delay: null
slave_sql_running_state: replica has read all relay log; waiting for more updates
master_retry_count: 86400
master_bind:
last_io_error_timestamp:
last_sql_error_timestamp:
master_ssl_crl:
master_ssl_crlpath:
retrieved_gtid_set:
executed_gtid_set:
auto_position: 0
replicate_rewrite_db:
channel_name:
master_tls_version:
master_public_key_path:
get_master_public_key: 0
network_namespace:
1 row in set, 1 warning (0.00 sec)
实际需要执行的语句;
change master to master_host='192.168.116.166',master_user='slave21',master_password='#slvae21!@3ll',master_log_file='mysql-bin.000001',master_log_pos=157;
- master_host= #后面要填写第一台主master的ip
- master_user= #写之前在主master上创建的用户名
- master_password= #写之前在主master上创建的用户名的密码
- master_log_file= #日志文件,在master使用show master status;那一步显示的值。
- master_log_pos= #偏移量
start slave;
开启同步复制数据
show slave status \g
执行这一条语句后,看slave_io_running: yes 、slave_sql_running: yes这两个值是否为yes,为yes表示正在进行同步,也表示着我们这次的实验是成功的。
当然也有小伙伴做完之后这两个值不为yes,可能会出现有一个值为no,或者两个值都为no的情况。
4.4 出现no该如何解决
可以先将slave停了,重新再定义一遍,直到两个都为yes即可。
mysql> stop slave;
query ok, 0 rows affected, 1 warning (0.00 sec)
mysql> reset slave;
query ok, 0 rows affected, 1 warning (0.01 sec)
mysql> start slave;
query ok, 0 rows affected, 1 warning (0.03 sec)
mysql> show slave status \g
*************************** 1. row ***************************
slave_io_state: waiting for source to send event
master_host: 192.168.116.166
master_user: slave21
master_port: 3306
connect_retry: 60
master_log_file: mysql-bin.000001
read_master_log_pos: 157
relay_log_file: localhost-relay-bin.000003
relay_log_pos: 373
relay_master_log_file: mysql-bin.000001
slave_io_running: yes
slave_sql_running: yes
replicate_do_db:
replicate_ignore_db:
replicate_do_table:
replicate_ignore_table:
replicate_wild_do_table:
replicate_wild_ignore_table:
last_errno: 0
last_error:
skip_counter: 0
exec_master_log_pos: 157
relay_log_space: 767
until_condition: none
until_log_file:
until_log_pos: 0
master_ssl_allowed: no
master_ssl_ca_file:
master_ssl_ca_path:
master_ssl_cert:
master_ssl_cipher:
master_ssl_key:
seconds_behind_master: 0
master_ssl_verify_server_cert: no
last_io_errno: 0
last_io_error:
last_sql_errno: 0
last_sql_error:
replicate_ignore_server_ids:
master_server_id: 21
master_uuid: 7d57e7f4-c945-11ed-b2a1-000c29b5625a
master_info_file: mysql.slave_master_info
sql_delay: 0
sql_remaining_delay: null
slave_sql_running_state: replica has read all relay log; waiting for more updates
master_retry_count: 86400
master_bind:
last_io_error_timestamp:
last_sql_error_timestamp:
master_ssl_crl:
master_ssl_crlpath:
retrieved_gtid_set:
executed_gtid_set:
auto_position: 0
replicate_rewrite_db:
channel_name:
master_tls_version:
master_public_key_path:
get_master_public_key: 0
network_namespace:
1 row in set, 1 warning (0.00 sec)
也可以将要同步的数据库的内容,先拷贝一份过去从服务器上,让两台服务器要同步的数据库内容完全一样,这时在重新使用这个方式进行绑定,启动。
5.1 在主master上创建数据库
以上的实验我们就做完了,是时候开始创建数据库来验证了,我们之前选择同步的数据库是test
那么我们就创建test
数据库,并在其中写入表、数据等内容。
#主master上创建
mysql> create database test;
query ok, 1 row affected (0.01 sec)
mysql> create database abc;
query ok, 1 row affected (0.00 sec)
mysql> use test
database changed
mysql> create table test1(id int,name varchar(20) not null default 'username');
query ok, 0 rows affected (0.00 sec)
mysql> insert into test1 values(1,'zhangsan'), (2,'lisi'), (3,'wangwu');
query ok, 3 rows affected (0.02 sec)
records: 3 duplicates: 0 warnings: 0
mysql> desc test1;
------- ------------- ------ ----- ---------- -------
| field | type | null | key | default | extra |
------- ------------- ------ ----- ---------- -------
| id | int | yes | | null | |
| name | varchar(20) | no | | username | |
------- ------------- ------ ----- ---------- -------
2 rows in set (0.01 sec)
mysql> select id,name from test1;
------ ----------
| id | name |
------ ----------
| 1 | zhangsan |
| 2 | lisi |
| 3 | wangwu |
------ ----------
3 rows in set (0.00 sec)
5.2 在slave从数据库上查看
可以看到test
数据库已经同步过来了,进入到test
库中查看其下的数据,一样是同步上了。
mysql> show databases;
--------------------
| database |
--------------------
| information_schema |
| mysql |
| performance_schema |
| sys |
| test |
--------------------
5 rows in set (0.00 sec)
mysql> use test;
reading table information for completion of table and column names
you can turn off this feature to get a quicker startup with -a
database changed
mysql> show tables;
----------------
| tables_in_test |
----------------
| test1 |
----------------
1 row in set (0.00 sec)
mysql> desc test1;
------- ------------- ------ ----- ---------- -------
| field | type | null | key | default | extra |
------- ------------- ------ ----- ---------- -------
| id | int | yes | | null | |
| name | varchar(20) | no | | username | |
------- ------------- ------ ----- ---------- -------
2 rows in set (0.00 sec)
mysql> select id,name from test1;
------ ----------
| id | name |
------ ----------
| 1 | zhangsan |
| 2 | lisi |
| 3 | wangwu |
------ ----------
3 rows in set (0.00 sec)
查看数据库中的表的信息都存在,说明选择同步的test
数据库没问题。
以上的这个实验做下来会发现,只能从数据库同步主数据库,那么能否在这个基础上,让它们两都可以互相同步呢,答案是可以的,这个方式即为主主同步,两个都为主服务器,它同步数据的时候是从,写入数据的时候是主,下一篇来揭晓。若觉得以上内容还行的,可以点赞支持一下!