记一次mysql主从同步因断电产生的不能同步问题 1236 1032

背景：

　　项目新上线一个月，qa需要测试断电服务拉起，服务拉起成功后，发现mysql主从异常，以下是发现的问题以及解决方案

问题1：

　　Slave_IO_Running: No 一方面原因是因为网络通信的问题也有可能是日志读取错误的问题。以下是日志出错问题的解决方案：

　 Last_IO_Error: Got fatal error 1236 from master when reading data from binary log: 'Could not find first log file name in binary log index file'

解决方案：

　　第一步停止从机slave

　　　　mysql> stop slave;

　　到master机器执行

　　　　mysql> show master status/G;

　　可以看到：

　　　　+-------------------+----------+--------------+-------------------------------------------+

　　　　+-------------------+----------+--------------+-------------------------------------------+

　　　　+-------------------+----------+--------------+-------------------------------------------+

　　日志为mysqld-bin.000013

　　主机刷新日志

　　　　mysql> flush logs;

　　　因为刷新日志file的位置会+1，即File变成为:mysqld-bin.000014

　　接着切换到从机

　　　　mysql> CHANGE MASTER TO MASTER_LOG_FILE='mysqld-bin.000014',MASTER_LOG_POS=4;

　　　　mysql> stop slave;

　　　　mysql> show slave status\G;　　　　　

　以上为解决方案，可百分之九十解决mysql 1236 error ，当然还有百分之十解决不了，还有个简单粗暴的方法

　　　　1.重启停止slave

　　　　　　mysql> stop slave;

　　　　2.重置binlog 文件

　　　　　　mysql> reset slave;

　　　　　　mysql> reset master;　　　　

　　　　3.启动从机slave

　　　　　　mysql> stop slave;　　　　　　　　

问题2：

　　Slave_SQL_Running: No　　1.可能是在从库进行了写操作 2.从库重启后进行了事物回滚导致和主库数据不一致

　　Last_SQL_Error: Worker 3 failed executing transaction '' at master log mysql-bin.000013, end_log_pos 440267874　　　　　　　　

　　 Could not execute Delete_rows event on table db_test.tbuservcbgolog; Can't find record in 'tbuservcbgolog', Error_code: 1032　　

　　 handler error HA_ERR_KEY_NOT_FOUND; the event's master log mysql-bin.0000013, end_log_pos 440267874

　　方法1，忽略所有1032错误，不推荐

　　　　更改my.cnf文件，在Replication settings下添加：

　　　　　slave-skip-errors　＝　1032

　　方法2，跳过上一次错误：

　　　　mysql> stop slave ;

　　　　mysql> set GLOBAL SQL_SLAVE_SKIP_COUNTER=1;

　　　　mysql> start slave ;

　　但是由于我们服务有好多秒级刷新的数据，所以导致跳过一个错误，又来一个错误

　　方法3，利用end_log_pos还原数据，此方法需要停止master的写操作

　　　　根据错误提示信息，用mysqlbinlog找到该条数据event SQL并逆向手动执行。如delete 改成insert。

　　　　本例中，此事件在主服务器Master binlog中的位置是 mysql-bin.000013, end_log_pos 440267874。

　　　　1）利用mysqlbinlog工具找出440267874的事件

　　　　　　（可以加上参数-d, --database=name 来进一步过滤）

/usr/local/mysql-5.6.30/bin/mysqlbinlog --base64-output=decode-rows -vv mysql-bin.000013 |grep -A 20 '440267874'

或者/usr/local/mysql-5.6.30/bin/mysqlbinlog --base64-output=decode-rows -vv mysql-bin.000013 --stop-position=440267874 | tail -20

或者usr/local/mysql-5.6.30/bin/mysqlbinlog --base64-output=decode-rows -vv mysql-bin.000013 > decode.log

　　　　将查询出来的语句进行反转执行即可，然后启动slave就ok了