正在加载页面 · Loading page
正在加载页面 · Loading page
怎么做
一件是系统坏了,另一件是没人提前知道它会坏。第二件几乎总是更便宜的那个修法,但它不产生英雄故事,所以很少有人去修。
我的做法很无聊:每个告警都要能回答「如果不处理会怎样」。答不上来的,降级成日报;答得上来的,写清楚处理步骤。
01
答不出「不处理会怎样」的告警,不配把人叫醒。
02
如果处理方式是「找我」,那这个系统只有一个可用副本,就是我。
03
半年没响过的告警,要么规则错了,要么问题已经没了。两种都该删。
经历
从实习到现在,一共三段。
17 → 2
支付对账链路。把夜间告警从每周十七次降到两次,方法是删掉其中十一条规则。
2025年2月 — 至今深圳
2 年半
库存服务。写了第一版 runbook,从此新人值班不再需要人陪。
2022年7月 — 2025年1月广州
3 个工具
三个内部工具,其中两个还在用。
2021年6月 — 2022年6月深圳
工具
只列跑过生产的。学过但没上过线的不在这里。
教育
毕业设计做的是分布式日志收集
2017年9月 — 2021年6月