测试老炮儿不谈方法论，只晒17个技术踩坑实录

　　去年五月，CDN节点突然集体掉权重，不是404，是200但Content-Length比上一秒少三百七十二字节——监控里那条报警弹出来的时候，我正把最后一口凉掉的黄焖鸡盖饭扒进嘴里，筷子头戳在餐盒底发出空腔响，工位对面老张抬眼看了我一眼，又低头继续敲他的备案续期脚本。

　　我原以为是上游gzip开关飘了，结果抓包发现Content-Encoding还是identity，再往回追到CMS模板渲染层，才发现那个新来的实习生把layout.twig里{% include 'head.html' %}写成了{% include 'head.html.twig' %}——本地跑通了，因为dev环境开了fallback机制；测试环境也过了，因为QA只点了首页没点二级栏目；生产切流时蜘蛛刚好扫到/zh-hans/about/team/这条路径，缓存键哈希一错，整条链路全乱套。这个我敢打包票，抓包文件还在D盘TestBugs目录第十七个子文件夹里，带时间戳。

　　群里@我的是小王，发了个“？？？”，后面跟个咧嘴笑表情包，就这一个图。他上个月刚转正，负责灰度发布流程卡点，那天他根本没看CDN控制台的权重曲线，光盯着K8s Pod Ready状态——Pod都绿了，他觉得稳了。可Pod绿不等于Nginx upstream里的server alive，alive不等于Lua balancer模块真拿到了header里那个X-Cache-Status。我懒得跟他吵，直接甩了段curl -H "User-Agent: Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)" https://xxx.com/zh-hans/about/team/ 的输出截图，他隔了十八秒回：“哦…这玩意儿还能绕过L7负载？”

　　机房空调今年坏了三次，第二次修完那个老技工蹲在配电柜旁边抽烟，烟灰掉进散热格栅里，我路过时瞥见他工装裤膝盖处磨得发白，像两块旧轮胎皮。他问我“你们测API还看TCP重传率不”，我说现在看rto，他说“噢，比以前细”。说完把烟头摁灭在水泥地上，用鞋底蹭了蹭——这事儿跟我今天说的17个坑没半毛钱关系，但我就记得那双鞋。

　　第十三个坑：凌晨三点改完Redis分片配置，上线前漏测了key过期策略和Lua脚本里table.maxn()调用，在QPS冲到四千五那会儿，某个Lua沙箱OOM，整个cluster slot迁移中断了十七分钟。这个我说不准——到底是maxmemory-policy设成allkeys-lru导致evict太猛，还是那段用ipairs遍历大hash的代码压垮了内存，后来运维甩过来的日志里混着三条不同时间戳的error级别日志，格式还不统一，我拉了三个版本的redis.conf对照看，看到最后眼皮跳。

　　第十七个，也是最后一个：某次大促前夜，CDN预热脚本跑了一半，突然报错“invalid domain in cache purge list”。排查发现是上游域名服务返回的TXT记录多了一个换行符，Python的urllib.parse.urlparse()吞不掉，后面所有purge任务全部fail silent。没人知道它什么时候开始加的换行，没人查原始commit，我们最后是把所有TXT record手动trim一遍才过。这不是方法论问题，是人盯日志盯得太熟，熟到对换行符失去警觉。

　　昨天我又翻了下那个Excel，叫《17坑汇总-勿删》，第三列写着“触发条件”，第六列是“谁填的复现步骤”，第七列空着——填的是“修复后是否回归验证”，目前还剩五个框没打勾。李工上周跟我说，要不要抽一天把这十七个串成SOP文档。我回他：“你试试把‘手抖按错键盘’写成SOP。”他发了个抱拳表情。我没回。

　　其实去年五月还有个事儿：测试环境数据库备份脚本被误部署到了生产，没启cron，也没改表名，只是默默生成了一堆名为backup_20230512_prod_old的临时表，占了八十九G空间。这事没人提，运维当日常碎片清理掉了。我昨天清回收站，看到一个同名压缩包，点开解压后发现里面全是pg_dump的原始sql文件，时间戳精确到毫秒，文件名末尾还带着“.test”——估计是谁导出测试用的，忘了删。我把这个也记在Excel第八列，标题叫“未归档但未必不存在的第十八个坑”。

文章配图，仅供参考

　　对了，刚才又弹了一条监控报警，这次是Sentry的前端错误率突增。我看了眼时间，正好是下午三点零七分。还没点开，先伸手摸了下鼠标右边的保温杯——凉的。得去茶水间续一杯。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!