边缘站长绝不会说的建站技术真相

　　去年十一月，凌晨三点二十，我正蹲在IDC机房门口啃半包辣条——不是因为饿，是刚把值班室那桶泡面倒进水槽时闻见一股馊味，不敢再碰。监控屏右下角贴着三道蓝胶布，盖着去年换硬盘时划出的裂痕，屏幕左上角时间跳成03:21，而磁盘告警没响，连个屁都没放。

　　我原以为是Zabbix配置飘了，毕竟上周刚被厂商远程改过agent参数，说“提升采集精度”。结果SSH连上去，df -h 一敲，/var/log 下占了98%，但logrotate明明配了daily+rotate 7，连compress都开了。我删了两轮日志，服务又活了四十几分钟，第四次挂的时候，我才发现那个rotate脚本里，postrotate段落被注释了三行，最底下一行写着：“# 老板说先别清，留着查攻击源”。——谁写的？没人认。监控群截图还在，ID发的是“@所有人 这波CC特征很典型”，但没人提这行注释是谁加的，就像没人记得去年端午谁把Nginx.conf里的client_max_body_size从100m改成1g后忘了重启进程。

文章配图，仅供参考

　　证书过期那天其实早露了苗头。Let’s Encrypt的renew日志里反复报错“connection refused”，但我没点开看，因为同一时间，三个站点DNS解析全乱套——不是TTL问题，是某云CDN后台那个“智能调度开关”自己关了，谁动的？运维系统操作日志查不到，工单追踪号显示“客户自助关闭”。客服电话里，小姑娘声音很甜：“先生您确认没点错呀？”我对着听筒嗯了两声，挂掉前听见她那边孩子哇地一声哭出来，奶瓶掉地上，叮当响。

　　带宽跑满那天更滑稽。流量图冲上峰值，我看了一眼就去扒防火墙策略，结果发现自定义规则链里塞了27条“allow from 192.168.0.0/16”，其中22条指向内部测试网段——可我们压根没这网段。是去年新来的实习生抄模板抄漏了斜杠，还是上上任交接时误粘贴？没人说得清。我一条条删，删到第十九条时，老板在大群发了个截图，是客户邮件原文：“贵司边缘节点已持续无法访问超四小时，附录为第三方拨测报告。”下面跟了一句：“今晚值班的，明早九点会议室。”

　　迁移丢数据那次，我真没骂人。只是看着rsync进度卡在99.7%不动，盯了二十三分钟，然后顺手点了下“忽略时间戳强制覆盖”，再点确认，进度条跳到100%，然后……整个静态资源目录空了。不是rm -rf，是源端那个s3fs挂载突然失联，它把本地缓存当成真实路径写了回去。这事没人记录，因为没人敢写：故障复盘文档第三页写着“本次操作符合变更流程”，签名栏空白，而签字笔就插在我耳机盒里，墨水早干了。

　　最邪门的是监控没告警那次。CPU、内存、网络延迟全绿，唯独磁盘IO wait高得离谱，但阈值设的是95%，实际卡在94.8。我后来翻了五遍告警策略文件，终于看见注释：“# 剔除DB高峰期，避免误报”，括号外用铅笔补了句小字：“高峰：19:00–23:30”。可那天挂的是上午十一点。谁写的铅笔字？巡检表上签的是老张名字，但他那周根本没排班，人在三亚陪产——他老婆二胎，比我们这次事故晚三天生的。

　　昨天整理备份清单，发现有个脚本叫backup_edge_daily.sh，最后修改时间是前年冬天。我顺手run了一下，它吐出一行：“No such file or directory: /mnt/backup_local”。可/mnt下面根本没有backup_local这个挂载点。它已经跑了三百多天，每天输出同样的错误，而日志轮转规则把它压进/dev/null——是的，就在crontab里明晃晃写着：>/dev/null 2>&1。我没删它。我把它cp成backup_edge_daily_old.sh，又新建了个backup_edge_daily.sh，第一行加了set -e，第二行写了date >> /var/log/backup_trace.log。就这么干巴巴两行，别的没动。

　　所以啊，“边缘站长绝不会说的建站技术真相”——不是什么高深东西。就是优胜劣汰太狠，狠到你连解释的机会都没有。有人扛住一次磁盘满、两次DNS漂移、三次证书过期，慢慢学会在config里藏三个同名变量、把check脚本拆成五段、给每个cron加sleep随机数……可更多人，干到第三次告警还没响，就被工单系统自动打标“响应滞后”，进了人力池名单。我不怪他们。我盯着自己手机锁屏照片看了十秒——是我闺女满周岁那天拍的，她攥着一只塑料螃蟹，蟹钳掉了半边，可她笑得满脸褶子。那天我请了半天假，回公司路上堵车，导航说“前方事故，预计延误四十来分钟”，我就坐在车里，把那只断钳的螃蟹照片放大，又缩小，又放大。

　　今天下班前，我把所有边缘节点的磁盘告警阈值统一调成92%，不管它是SSD还是HDD，不管业务跑不跑写密集型。没走审批，也没通知任何人。反正等哪天它又不响了，我也不会说破——就让它继续聋着吧。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!