MySQL运维与设计5大经典陷阱避坑指南
|
去年十二月份,慢查询爆出来的那一刻,我正在往咖啡里倒第三勺糖。监控告警弹窗叠了四层,MySQL连接数卡在 1037,主库 IO 等待曲线像被狗啃过。运维老张端着保温杯路过工位,头也没抬:“又来了?”我说“嗯”,他顺手把杯盖拧紧,“上次是你删错索引,这次是你自己建的分区表?”——我没吭声,因为这次真不是我。 开发小陈冲进来时外套还挂着雨珠,手指直接戳我屏幕:“你是不是改了从库延迟监控阈值?现在告警全是红的!”我抬头看他袖口蹭了块蓝墨水,没理他那句,反问:“你昨天上线那个「用户行为快照」表,字段类型定的是 TEXT 还是 JSON?”他愣了半秒,说“TEXT 啊,反正存的是日志碎片……”我当场截了他 SQL 审核单截图发群里,字段定义那行高亮得跟急诊灯似的:`extra_info TEXT NOT NULL DEFAULT ''`。TEXT!默认不走任何长度校验,也不进 buffer pool 预热逻辑,但凡某条日志塞进个 base64 图片……行,不说了,风扇一直在转,转得我太阳穴一跳一跳。 我原以为是备库应用线程堵在某个大事务回放上,结果连上从库一查 `SHOW PROCESSLIST`,二十多个线程全卡在 “Waiting for table metadata lock” —— 锁源居然是凌晨两点自动触发的一次 ALTER TABLE … ADD COLUMN,还是加了个没有 DEFAULT 的 TIMESTAMP。那会儿我正睡着,值班系统没叫我,领导在 Slack 里发了个省略号,我回了个 “已接手”,然后盯着屏幕上的行数一直在跳:234518、234519、234520……它就那么匀速地涨,像在嘲讽人。 说到这个,我得提一句备份策略。我们去年换的 XtraBackup 8.0,号称支持并发压缩,结果生产环境第一次跑全量备份,凌晨三点磁盘 IO 打满,主库慢得连 `SELECT 1` 都要三秒。运维老张蹲机房拔掉一块 SSD 模块散热,出来甩了句:“备份不是救火演练,是定期给系统动刀——你敢让备份进程和业务争锁,不如直接写个存储过程去删 binlog。” 我没顶嘴,因为他说得对。外卖凉了,塑料盒底结了层油膜,我拿筷子拨拉两下,没吃。
文章配图,仅供参考 第五个坑?不是主从切换失败,不是长事务未提交,是备份恢复验证环节里,没人真跑过一次 `mysqlbinlog --base64-output=DECODE-ROWS -v` 去看那堆 `# at 12847562` 后面到底改了啥。我们恢复脚本里写着 “跳过 GTID 不一致错误”,可没人确认过 skip 的到底是哪一行 DML。上周五复盘,DBA 小李说她恢复测试库时发现某张表少了三天数据,查下来是 binlog 中间段有个 `INSERT ... SELECT` 被主库优化器改成了临时表物化,从库重放时因临时表路径权限问题静默跳过——没人知道它跳了,直到报表对不上。窗外天黑了,灯是自动亮的,惨白,照得终端里的红色 ERROR 字样特别晃眼。 最讽刺的是第三个坑:主键设计。我们一直信奉“自增 INT 是银弹”,直到某天订单表插入开始随机 hang 住,`INFORMATION_SCHEMA.INNODB_METRICS` 里 `innodb_row_lock_waits` 每分钟涨三位数。查了半天,发现开发小陈为了“兼容老系统”,把订单号当业务主键,又硬加了个 `id BIGINT AUTO_INCREMENT PRIMARY KEY`,再在订单号上建唯一索引……结果呢?每次 insert 先锁自增 ID 段,再锁唯一键二级索引页,两个锁顺序一颠,死锁概率翻倍。我盯着那张表结构看了俩小时,突然想起十年前我带的第一个实习生也这么干过,我还夸他“考虑周全”。呵。 其实最该骂的不是开发,是我们这群老鸟。明知业务方要的是“马上能用”,还假装自己真能把 CAP 和 MVCC 平衡好;明知道凌晨三点不该手动执行 DDL,可领导微信弹来一句“客户等着看效果”,手就点下去了。上周我跟开发吵了一架,起因是他要在用户表加个 `is_vip_flag TINYINT DEFAULT 0 COMMENT '是否VIP(0否1是)'`,我让他改成 ENUM,他甩过来一张 MySQL 8.0 文档截图:“ENUM 不支持在线加值啊哥!”——我愣了三秒,才反应过来他没说错。我改口说“那就用 TINYINT,但加注释时写清楚 0/1/2/3 各代表什么,留个坑位”,他点头答应,转身去改 Jira 卡。结果下午我就看见上线脚本里那行注释被删了,只留了个空 COMMENT。谁干的?我不知道。我懒得问。 至于那个“优胜劣汰”的判断?站得住。不是靠技术多牛,是靠谁能熬过十次误操作后还敢碰生产库。有人熬不住辞职了,有人熬成背锅侠被调去管监控平台,剩下几个还在改 my.cnf、等主从延迟归零、对着 pgrep mysqld 结果发呆。老张前两天买了新保温杯,不锈钢的,杯盖旋钮带刻度。我问他为啥换,他说:“旧杯子漏,有次接告警电话,茶水滴在键盘上,Ctrl+C 没复制成功。”——我笑出声,他看着我,忽然问:“你那套 binlog 分析脚本,能不能加上自动标记可疑的 INSERT … SELECT 场景?”我没答,因为我知道,加了也没人看。下周一我打算把恢复验证流程挪到周三,那天午饭有饺子。至于今晚?先重启一下从库复制线程吧。反正它也快连上了。 (编辑:站长网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |


嵌入式UI设计:资源受限设备的极致美学
站长必避的3个MySQL设计陷阱:半年一崩
高效信息流设计:8个工具提升资源筛选效率3倍
创业信息流设计:流量、合规、效率的三角平衡术
移动互联时代,交互设计别再套用2010年旧逻辑
小户型扩容神器:12个科技感爆棚的设计师私藏网站
无障碍设计:从第一行代码践行技术尊重
