主从复制有利于 数据库架构的健壮性 提升访问速度 易于维护管理
主从互为备份M ---- S 一主多从 异步同步
该过程的第一部分就是master记录二进制日志。在每个事务更新数据完成之前,master在二日志记录这些改变。MySQL将事务串行的写入二进制日志,即使事务中的语句都是交叉执行的。在事件写入二进制日志完成后,master通知存储引擎提交事务。
下一步就是slave将master的binary log拷贝到它自己的中继日志。首先,slave开始一个工作线程——I/O线程。I/O线程在master上打开一个普通的连接,然后开始binlog dump process。Binlog dump process从master的二进制日志中读取事件,如果已经跟上master,它会睡眠并等待master产生新的事件。I/O线程将这些事件写入中继日志。
SQL slave thread(SQL从线程)处理该过程的最后一步。SQL线程从中继日志读取事件,并重放其中的事件而更新slave的数据,使其与master中的数据一致。只要该线程与I/O线程保持一致,中继日志通常会位于OS的缓存中,所以中继日志的开销很小。
此外,在master中也有一个工作线程:和其它MySQL的连接一样,slave在master中打开一个连接也会使得master开始一个线程。复制过程有一个很重要的限制——复制在slave上是串行化的,也就是说master上的并行更新操作不能在slave上并行操作。
mysql -uroot -p123456 -S /data/3306/mysql.sock
mysql> show variables like 'log_bin%';
+---------------------------------+-------+
| Variable_name | Value |
+---------------------------------+-------+
| log_bin | ON |
server-id = 不一样
mysql> grant replication slave on *.* to 'rep'@'192.168.10.%' identified by '123456';
mysql> flush privileges;
mysql> flush table with read lock; //读锁
mysql> show master status/logs;
+------------------+-----------+
| Log_name | File_size |
+------------------+-----------+
| mysql-bin.000005 | 338 |
+------------------+-----------+
mysqldump -uroot -p123456 -S /data/3306/mysql.sock -A -B --events --master-data=2 > /opt/rep.sql
mysql> unlock tables; //解锁
# mysql -uroot -p123456 -S /data/3307/mysql.sock < /opt/rep.sql
mysql -uroot -p123456 -S /data/3307/mysql.sock
CHANGE MASTER TO
MASTER_HOST='192.168.10.10',
MASTER_PORT=3306,
MASTER_USER='rep',
MASTER_PASSWORD='123456',
MASTER_LOG_FILE='mysql-bin.000005',
MASTER_LOG_POS=417;
/data/3307/data/master.info //生成的文件
mysql> start slave;
mysql> show slave status\G;
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
relay-bin.index
/data/3307/relay-bin.000001
/data/3307/relay-bin.000002
relay-log.info /中继日志
427
mysql-bin.000005
591
mysql> show processlist; //查看状态
--------------------------------------+------------------+
| Id | User | Host | db | Command | Time | State | Info |
+----+-------------+-----------+------+---------+------+---------------------------------------
| 1 | rep | 192.168.10.10:54094 | NULL | Binlog Dump | 147 | Master has sent all binlog to slave; waiting for binlog to be updated | NULL
| 1 | system user | | NULL | Connect | 144 | Slave has read all relay log; waiting for the slave I/O thread to update it | NULL
| 2 | system user | | NULL | Connect | 144 | Waiting for master to send event
mysql> show slave status\G;
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
Seconds_Behind_Master: 0
读写分离授权方案 数据复制是单向的
mysql库不同步,主从库分别授权
缺陷:从库切换主库的时候,连接用户权限的问题。保留一个从库专门准备接替住。
vim /etc/my.cnf
[mysqld]
binlog-ignore-db = mysql
binlog-ignore-db = performance_schema
binlog-ignore-db = information_schema
mysql> create user hequan@localhost identified by '123456'; //先不给权限
replicate-do-table 复制的表
replicate-ignore-table
replicate_wild_ignore_table=mysql.% //可以加通配符 用这种方法
slave-skip-errors = 1032,1062 //排除1032,1062的保持。
lower_case_table_names=1 //让MySQL不区分大小写! //慎用,会影响原来的表名字
--skip-name-resolve 选项启动mysqld来禁用DNS主机名查找
mysql接收到连接请求后,获得的是客户端的ip,为了更好的匹配mysql.user里的权限记录(某些是用hostname定义的)。
如果mysql服务器设置了dns服务器,并且客户端ip在dns上并没有相应的hostname,那么这个过程很慢,导致连接等待。
[mysqld]
read-only //只读,,root不受限,
grant时 不能有super或者 all privileges 权限
mysql> create database xxxxx;
ERROR 1290 (HY000): The MySQL server is running with the --read-only option so it cannot execute this statement
主从不同步
SQL=NO的情况,可以用下面的命令跳过报错
在slave处于stop状态下,执行 set global sql_slave_skip_counter=N以跳过命令 N=1
一个insert语句为例(引擎InnoDB、binglog_format=statement), 在binlog中实际上有三个event,分别为begin\insert\commit 。 命令类型都是Query_log_event.
1、若N=1且当前event为BEGIN, 则N不变,跳过当前event继续。
2、若N=1且当前event处于一个事务之内(BEGIN之后,COMMIT之前),则N不变,跳过当前event继续。
slave 开启从库记录binlog 级联同步 当做数据库备份
log-bin = /data/3307/mysql-bin
log-slave-updates
expire_logs_days = 7 //保留7天