记一次MYSQL主从sql线程not_running故障处理

IT那活儿发布于2023-01-11 13:20 / 1335人阅读

环境:

os：redhat7，DB：mysql 6.7 主从

故障现象：

主从线程未running，同步中断

报错日志：

Could not execute Write_rows event on table skdata_2021.pj_xxxx_fpmx; Duplicate entry 043002000111-01278925 for key ak_key_2,

Error_code: 1062; handler error HA_ERR_FOUND_DUPP_KEY; the events master log master-bin.000403, end_log_pos 333202176

处理步骤：

方法一：对于数据量少的时候适用

根据唯一性key查找相关记录
master库备份记录
slave库删除重复记录

方法二：对于数据量大的时候适用

1. 从库操作

show variables like %slave_exec_mode%;

set global slave_exec_mode=IDEMPOTENT;

stop slave;

start slave;

2. 确认主从无延迟及确认数据一致操作完后，修改回去-------可以了，改回去（存在数据不一致的风险）

set global slave_exec_mode=STRICT;

stop slave;

start slave;

UPDATE报错:

Could not execute Update_rows event on table skdata_2021.qrtz_scheduler_state; Cant find record in qrtz_scheduler_state,

Error_code: 1032; handler error HA_ERR_KEY_NOT_FOUND; the events master log master-bin.000403, end_log_pos 333327330

1. 使用mysqlbinlog主库操作：

▼▼▼

mysqlbinlog --no-defaults --base64-output=decode-rows --verbose --start-position=333326998 --stop-position=333327330 master-bin.000403
把更新前记录找出，并在从库插入执行，再启动slave sql进程
SET @@session.collation_database=DEFAULT/*!*/;
BEGIN
/*!*/;
# at 333327142
#210628 10:41:19 server id 127 end_log_pos 333327216 CRC32 0xb31a9243 Table_map: `skdata_2021`.`qrtz_scheduler_state` mapped to number 110214
# at 333327216
#210628 10:41:19 server id 127 end_log_pos 333327330 CRC32 0x85a6c09f Update_rows: table id 110214 flags: STMT_END_F
### UPDATE `skdata_2021`.`qrtz_scheduler_state`
### WHERE
### @1=fpskgl21616596076563
### @2=1624848058505
### @3=20000
### SET
### @1=fpskgl21616596076563
### @2=1624848078982
### @3=20000
ROLLBACK /* added by mysqlbinlog */ /*!*/;
SET @@SESSION.GTID_NEXT= AUTOMATIC /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;

2. 从库insert update之前的记录

▼▼▼
set sql_log_bin=0;

insert into `skdata_2021`.`qrtz_scheduler_state` values (fpskgl21616596076563,1624848058505,20000);
commit;
set sql_log_bin=1;

3. 启动slave sql线程

▼▼▼
start slave sql_thread;

END

更多精彩干货分享

点击下方名片关注

IT那活儿

云服务器 GPU云服务器记一次在阿里云搭建服务器记一次阿里云服务器集体中毒 java线程运行一次 java多线程主从

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/129851.html

SegmentFault 技术周刊 Vol.42 - MySQL：从删库到跑路

摘要：肖鹏微博数据库那些事儿肖鹏，微博研发中心技术经理，主要负责微博数据库相关的业务保障性能优化架构设计，以及周边的自动化系统建设。经历了微博数据库各个阶段的架构改造，包括服务保障及体系建设微博多机房部署微博平台化改造等项目。 showImg(https://segmentfault.com/img/bV24Gs?w=900&h=385); 对于手握数据库的开发人员来说，没有误删过库的人生是...

aboutU 2019-06-25 18:34 评论0 收藏0
面试官:咱们来聊一聊mysql主从延迟

摘要：编辑器编辑器背景编辑器前段时间遇到一个线上问题，后来排查好久发现是因为主从同步延迟导致的，所以今天写一篇文章总结一下这个问题希望对你有用。编辑器几句唠叨编辑器大家好，我是小饭，一枚后端工程师。背景前段时间遇到一个线上问题，后来排查好久发现是因为主从同步延迟导致的，所以今天写一篇文章总结一下这个问题希望对你有用。如果觉得还不错,记得加个关注点个赞哦思维导图思维导图常见的主从架构随着日益增长的访...

EasonTyler 2021-11-17 17:08 评论0 收藏0