移动互联时代，多媒体开发亟需架构级革新

　　凌晨三点二十，机房空调的嗡鸣突然变了调，像被掐住脖子的蜂鸣器——我扒着机柜门缝往里看，散热扇上凝着一层油灰，不是灰尘，是去年换液冷管时漏的导热膏干了。值班室泡面桶堆在UPS机箱顶上，红烧牛肉味混着臭氧，客服小张的微信弹出来：“用户说点开视频就黑屏，但HLS切片明明200啊。”我回了个“嗯”，手指悬在键盘上没按下去，因为监控屏右下角那行绿色字体刚跳成红色：/storage/video-cache-full。

　　我原以为是CDN缓存没刷干净。所以先把边缘节点逐台telnet到80端口，确认HTTP服务活着；再ssh进去敲df -h，发现/var/log/ffmpeg没挂logrotate，单个日志塞了四十二G；删完，重启ffmpeg-worker进程，敲了三次systemctl restart才成功——第一次忘加--no-block，卡在Starting状态；第二次手抖敲成ffmepg-worker；第三次敲对了，但服务起来后立即报错“Failed to bind UDP port 12345: Address already in use”。查端口，是另一个同名进程在跑。谁起的？没人认。我们组四个人，三个在钉钉静音，一个在改简历。我杀掉老进程再启，这次成了。可五分钟后，/storage又红了。

　　四十来分钟里，我没碰一次主数据库，也没查DNS TTL——根本不用查。用户报的是“点开就黑屏”，不是“打不开网站”，不是“页面白屏”，是点开就黑。黑，就是视频流没推上来。所以不是SSL证书过期（上周刚续的），不是主从延迟（MySQL监控纹丝不动），不是机房断电（空调还在哼）。是存储满，是写死在本地磁盘上的转码队列，是十年前设计时连SSD价格都按GB算、硬编码路径的/media/transcode/inbox目录，而今天它被塞进了一百二十三路4K HDR直播流，每路自带三档自适应ABR——七十二档分辨率+码率组合，全挤在一块SATA盘上。优胜劣汰？淘汰的不是技术，是那种还相信“把所有东西存到一台机器上，然后做冗余”的念头。你信它，它就让你凌晨三点二十跪在机柜前，用ls -ltS /var/log | head -20筛出最大日志文件时，听见自己后槽牙在响。

文章配图，仅供参考

　　老板在运维大群发了个截图，是用户反馈后台截的——一张纯黑图，底下一行字：“主播手势识别失败，建议升级设备”。他加了一句：“这个是不是前端锅？”没人回。小李在角落补了句：“我们连帧都没送出去。”说完关了麦克风。我盯着他这句话看了半分钟，忽然想起上个月搬家，搬家用的纸箱印着“富士康郑州工厂残次品”，叠得太高，最上面那只箱子塌了，里头三块M.2 SSD全掉出来，弯成C形。快递员说“不影响用”，我当真了，插进新服务器一跑，前三天正常，第四天IO wait飙到98%，iostat里全是?。没报错，不宕机，只是慢——慢得像视频加载条卡在1%不动。跟今天一模一样。

　　监控没告警。不是阈值设高了，是压根没埋点。转码服务用的是一套二十年前开源的Perl脚本包装的FFmpeg封装层，作者叫Hans，GitHub头像还是2003年戴红领巾的照片。它的“健康检查”靠crontab每五分钟curl一下自己的/health，返回200就算活。可它只要还在吐stderr里的“frame=123456 fps=23.4 q=2.0 Lsize=1.2GiB”，就永远return 200。stderr里那堆数字看着很忙，实际是在写入一个已满的挂载点。我们用inotifywait监听/tmp/ffmpeg-queue目录，一旦有新文件就触发转码——但inotify不会告诉你磁盘满了，它只会默默失败，然后rm -f临时文件。文件没了，队列空了，监控自然显示“一切正常”。

　　窗外开始下雨，不是滴答，是闷声砸在彩钢板屋顶上，节奏和我右手敲键盘的频率渐渐同步。值班室窗玻璃裂了道缝，胶布横着贴了三道，最上面那条翘起来，边角卷着。小张孩子半夜发烧，视频电话里哭着喊爸爸，她把手机倒扣在泡面桶上，继续敲命令行。我看她拇指按在Ctrl+C上悬停了七秒，没按下去。我问她要不要帮看一眼log，她说“先等转码结束”，然后顿了一下，“反正也转不完。”

　　这个我到现在也没想明白：为什么所有转码任务都卡在“writing header”阶段？ffprobe看源流是好的，ffmpeg -v debug日志里却反复刷同一行：“avio_open2: retrying after 1000ms delay”，像是在等一个永远不会应答的设备。硬盘灯明明狂闪，iostat却说await稳定在3，不像IO瓶颈……算了，明天先把告警阈值调了——不是调成90%，是改成“只要/dev/sdb1 write error count > 0，就拉铃”。至于那个Perl脚本？先别动。它跑得太久，像老楼墙皮，一碰就掉渣。得先找个能扛住4K流并发写入的新壳子，再把骨头一根根抽出来。现在拆，整栋楼得塌。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!