Mariadb的主从复制实验和半同步的实现

1,主服务器需要开启二进制日志记录,并且授权一个用户给从节点。

主服务器的主配置文件[mysqld]内容如下。

  1. [mysqld]
  2. port3306
  3. socket= /tmp/mysql.sock
  4. skip-external-locking
  5. key_buffer_size = 256M
  6. max_allowed_packet = 1M
  7. table_open_cache = 256
  8. sort_buffer_size = 1M
  9. read_buffer_size = 1M
  10. read_rnd_buffer_size = 4M
  11. myisam_sort_buffer_size = 64M
  12. thread_cache_size = 8
  13. query_cache_size16M
  14. thread_concurrency = 8
  15. log-bin=/mydata/binlog/mysql-bin   定义二进制日志的位置,生产环境中不应当与数据库文件在一个磁盘上。
  16. binlog_format=mixed
  17. server-id1        server-id就使用默认的1
  18. datadir=/mydata/data
  19. sync_binlog = 1    产生二进制日志就写入磁盘

给从节点授权一个复制使用的用户

MariaDB [(none)]> GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO slaveuser@’172.16.2.17′ IDENTIFIED BY ‘slavepass’;

MariaDB [(none)]> FLUSH PRIVILEGES;

从节点配置:

mysql的主配置文件[mysqld]段如下

 
  1. [mysqld]
  2. port3306
  3. socket= /tmp/mysql.sock
  4. skip-external-locking
  5. key_buffer_size = 256M
  6. max_allowed_packet = 1M
  7. table_open_cache = 256
  8. sort_buffer_size = 1M
  9. read_buffer_size = 1M
  10. read_rnd_buffer_size = 4M
  11. myisam_sort_buffer_size = 64M
  12. thread_cache_size = 8
  13. query_cache_size16M
  14. thread_concurrency = 8
  15. #log-bin=mysql-bin        因为节点无需二进制日志,所以把这项注释掉了
  16. relay-log=/mydata/relaylog/relay-log       定义中继日志
  17. binlog_format=mixed
  18. server-id2           server-id定义为2
  19. datadir=/mydata/data
  20. read_only = 1            设定数据库为只读,但对于超级用户无效。只能针对普通用户。

在mysql中执行

 
  1. CHANGE MASTER TO MASTER_HOST=‘172.16.2.15’MASTER_USER=‘realuser’MASTER_PASSWORD=‘passwd’MASTER_LOG_FILE=‘master_bin.000001’MASTER_LOG_POS=495;
  2. START SLAVE;

配置完成后,在主库创建数据库和表,然后到从库查看。如果有说明配置成功。

查看从节点状态的命令是:SHOW SLAVE STATUS; 其它含意解释如下。

 
  1. MariaDB [(none)]> show slave status\G
  2. *************************** 1. row ***************************
  3. Slave_IO_State:                      当前从节点IO的状态
  4. Master_Host: 172.16.2.16      主节点的IP
  5. Master_User: slave                  使用那个用户连接的主节点
  6. Master_Port: 3306                  主节点使用的TCP端口
  7. Connect_Retry: 60                    多长时间读取一次
  8. Master_Log_File: mysql-bin.000005    当前主节点的二进制日志文件
  9. Read_Master_Log_Pos: 581                      当前主节点二进制日志文件位置
  10. Relay_Log_File: relay-log.000001        当前从节点中继日志文件
  11. Relay_Log_Pos: 4                                当前从节点中继日志文件中记录的位置
  12. Relay_Master_Log_File: mysql-bin.000005  正在中继主节点的日志文件是那个
  13. Slave_IO_Running: No                            从节点的IO_THREAD线程是否启动,如果为NO表示还没有向主节点请求二进制日志文件。这个线程工作内容是把主节点的二进制日志一条一条的同步到从节点的中继日志中。
  14. Slave_SQL_Running: No                 从节点的SQL线程是否启用,这个线程的任务是把中继日志中的SQL语句一条一条的读的MySQL中执行,以实现数据的写入。
  15. Master_Server_Id: 0               主节点的ID

当数据库已经运行了一段时间后,主节点已经有大量的数据。这时如果添加一台从节点,最好把主节点做一个完整备份,恢复到从节点。然后再配置从节点到主节点复制数据,这样能快速把主从节点数据同步一致。

1,先对主服务器做一个完整备份。然后把备份好的数据发送到从节点上。

 
  1. # mysqldump –lock-all-tables –all-databases –master-data=2 > master.sql
  2. # scp master.sql 172.16.2.17:/root

需要创建从节点连接主节点使用的数据库。

 
  1. mysql> GRANT REPLICATION SLAVE, REPLICATION CLIENT ON *.* TO  realuser@’172.16.2.13′  IDENTIFIED BY ‘passwd’
  2. mysql> FLUSH PRIVILEGES;

2,定义好从节点的工作特性。然后恢复数据。

在配置文件中[mysqld]加入以下段,并且注释二进制日志,因为从节点要二进制日志没用,白白浪费空间。

 
  1. relay-log  =  /mydata/relaylog/relay-log
  2. server-id = 2             serviceID 一定不能与主节点的ID重复。
  3. read_only = 1           设置数据库为只读模式,但对于超级用户无效。普通用户只能读,不能修改。
  4. sql < /root/master.sql    把主节点备份的数据恢复到库中

3,恢复数据时需要在备份的文件中找到,备份主节点时二进制日志文件使用到那个文件了,二进制日志文件中事件id所在的位置。大概如下:
— CHANGE MASTER TO MASTER_LOG_FILE=’mysql-bin.000009′, MASTER_LOG_POS=7925;

然后到数据库执行连接到主服务器。

CHANGE MASTER TO MASTER_HOST=’172.16.2.15′, MASTER_USER=’realuser’, MASTER_PASSWORD=’passwd’, MASTER_LOG_FILE=’master_bin.000001′, MASTER_LOG_POS=495;

启动IO_THREAD线程和SQL_THREAD线程

START SLAVE;

复制总结:

1,对于master 需要启动二进制日志,有惟一的server-id

2,binlog dump : 将从服务的 io thread 发出的读取二进制日志事件请求的数据发送给对方 。

3,slave 必须启用中继日志,关闭二进制日志(建议),有惟一的server-id。

IO thread:向master请求二进制日志并保存到本地的中继日志。

SQL thread:把本的中继日志中的sql语句一条一条的读取并执行

4,对于从服务器,一般只有一个主服务器。否则会造成中继日志混乱。

5,MariaDB 10 版本支持多源复制。从服务器支持多个主服务器,但是多个数据库。

6,可以多级复制,但从服务器如果做为其它从服务器的主服务器,需要开启二进制日志

7,从服务器可以有多个。

8,因为是异步复制,从服务器的数据可能会落后于主服务器。这个问题一很难避免。

如何启用半同步? 从mysql5.5.8后才有的功能。由google贡献给mysql的补丁,以插件式安装,默认没有安装。位于mysql的安装目录下的 lib/plugin下的 semisync_master.so 和 semisync_slave.so 一个是主节点专用,一个是从节点专用。

什么叫半同步: master至少要等待一个从节点把数据完全复制过去。

使用INSTALL 命令安装。配置文件中[mysql]下的plugin_dir= 用来指定插件文件的保存位置。如果有其它插件保存在其它位置,需要在这里定义,这样INSTALL命令可以找到。

在mysql下的安装方法

MariaDB> INSTALL PLUGIN rpl_semi_sync_master SONAME ‘semisync_master.so’;

安装过后引入几个新的服务器变量: 查看方法: SHOW GLOBAL VARIABLES LIKE ‘%semi%’;

  1. | rpl_semi_sync_master_enabled     | OFF |   是否开启此插件
  2. | rpl_semi_sync_master_timeout      | 10000 |    等待从节点最多多长时间,单位是毫秒。如果从节点在等待时间内没有响应,就不再等待,从半同步模式变为异步模式。
  3. | rpl_semi_sync_master_trace_level    | 32 |
  4. | rpl_semi_sync_master_wait_no_slave | ON       如果没有从节点是否还需要等待。

需要在配置文件中的[mysql]段中写入

rpl_semi_sync_master_enabled=1

rpl_semi_sync_master_timeout=1000

设置好后重新启动服务就可以了。

在从节点上的设置方法

 
  1. MariaDB> INSTALL PLUGIN rpl_semi_sync_slave SONAME ‘semisync_slave.so’;
  2. MariaDB> SHOW GLOBAL VARIABLES LIKE ‘rpl_semi%’;       查看安装插件后生成的服务器变量
  3.       | rpl_semi_sync_slave_enabled      | OFF    是否开启了此插件,ON为开启。
  4.       | rpl_semi_sync_slave_trace_level  | 32     此项需要与主节点保持一致。

在主配置文件中的[mysql] 段中写入

rpl_semi_sync_slave_enabled=1

在从节点上重启IO THREAD线程就可以了。

MariaDB> STOP SLAVE IO_THREAD;

MariaDB> START SLAVE IO_THREAD;

查看是否已经启用半同步模式,需要在MASTER上查看。

 
  1. MariaDB> SHOW GLOBAL STATUS LIKE ‘%semi%’;
  2.      Rpl_semi_sync_master_clients    工作于半同步的客户端有几个
  3.      Rpl_semi_sync_master_net_avg_wait_time   主节点为等待IO_THREAD平均等待的时间
  4.      Rpl_semi_sync_master_net_wait_time     主节点为等待IO_THREAD等待的时间
  5.      Rpl_semi_sync_master_net_waits           主节点为等待IO_THREAD等待的次数
  6.      Rpl_semi_sync_master_tx_avg_wait_time  主节点为等待IO_THREAD等待的事务

本文来自投稿,不代表Linux运维部落立场,如若转载,请注明出处:http://www.178linux.com/87305

(0)
HGGHGG
上一篇 2017-09-17 21:51
下一篇 2017-09-18 01:40

相关推荐

  • 计算机编程简史图

       这个图片太经典了,本来想翻译的,后来觉得这么经典的图片可能早已被人翻译了,简单的Google一下,果然有人翻译了。那我就把英文版和中文版都转过来吧。我们可以看到,其中很大一部分人都和Unix有着不解之缘(参见《Unix传奇上篇,Unix传奇下篇》) 英文原版 中文翻译版 什么也不说了,直接上图(图片比较大,单击图片看大图) 计算机编…

    Linux干货 2015-04-02
  • 路由以及实验

    路由 路由(routing)是指分组从源到目的地时,决定端到路径的网络范围的进程。路由工作在OSI模型第三层——网络层的数据包转发设备。路由器通过转发数据包来实现网络互连。路由器可以支持多种协议,但绝大多数使用的是TCP/IP协议。路由器通常连接两个或者多个由IP子网或者点到点协议表示的逻辑端口,至少拥有1个物理端口。路由器根据收到数据包中的网络层地址以及路…

    Linux干货 2017-05-11
  • 细数Linux发行版

    什么是Linux 广义上讲:Linux内核+应用程序狭义上讲:Linux内核  > Linux内核指的是我们通常所说的Kernel,主要用于负责系统调用、进程管理、内存管理、文件系统管理等功能。  应用程序指的是由GNU组织提供的开源的、通用的应用程序,如gcc、glibc、vi等。 我们平常所说的Linux,通常指广义层面上的Li…

    Linux干货 2017-08-30
  • 初学Linux之用户、组和权限

    1、用户和组管理命令 
    2、理解文件权限和默认权限 
    3、设置文件权限
    4、特殊权限 
    5、ACL

    2017-12-08
  • LVS 之 初识LVS

    LVS 之 初识LVS LVS 之 初识LVS 0x00 概述 0x01 LVS拓扑结构图: lvs集群类型中的术语 : 0x02 lvs-type lvs-nat lvs-dr lvs-tun lvs-fullnat : 0x03 调度算法(scheduler) 0x00 概述 LVS : Linux Virtual Server lvs 工作在 IOS …

    2017-05-11
  • DNS and BIND 进阶

    主DNS服务器的ip地址:192.168.1.109 主DNS服务器主机名:bogon 正向区域名:sh.com 反向区域名:1.168.192.in-addr.arpa 正向区域文件名称:/var/named/sh.com.hosts 反向区域文件名称:/var/named/192.168.1.rev 配置主文件/etc/named.conf过程 1、编辑…

    Linux干货 2016-12-06