扩容不是加机器那么简单
顾清和负责pg直营站视讯业务的容量规划。在外人看来,扩容就是加服务器,但他的经验是,加错地方的机器比不加更麻烦。三城扩容启动前,他先做了一轮指标体检:首帧加载在部分区域偏高,端到端时延在跨区访问时明显上升,月度可用性虽然达标但波动集中在特定时段。
他把这些现象画成一张热力图,结论是问题不在总量,而在分布。部分区域的边缘节点覆盖不足,导致跨区回源比例过高。扩容方案因此从“加总量”调整为“补分布”,在新城市优先部署边缘节点,而不是集中扩充中心机房。
用指标说服评审会
容量规划最难的不是技术,是让评审会相信钱花得值。顾清和的材料里很少出现形容词,更多是可比对的数字:
- 端到端时延目标八百毫秒以内,跨区回源比例下降后逐周核对;
- 多视角切换耗时四百毫秒以内,新节点上线后按区域抽测;
- 月度可用性守住99.95%,扩容期间灰度放量避免整体波动;
- 码率自适应命中率不低于百分之九十六,作为分发质量的旁证。
他提到,pg直营站解决方案强调可量化的交付节点,正是为了让这类决策有据可依。评审会上没有人能保证扩容一定顺利,但每个人都能看懂指标基线在哪里。
扩容之后要留观察期
新节点上线并不意味着工作结束。顾清和坚持留出观察期,重点看播放错误率和卡顿率是否出现新的分布特征。有一次观察期发现某区域卡顿率轻微上升,排查后确认是新节点与本地网络的对等互联质量波动,调整路由策略后回落。
他说,pg直营站视讯业务做的是让人放松的事,但容量规划必须紧绷。画质达标率这类指标看似冷冰冰,背后是每一次进入房间时的第一眼画面。扩容决策现场没有戏剧性,只有一条条被核对过的数据和一次次被推迟的上线时间。
补分布而不是加总量,这个判断太关键了,很多团队栽在这。
用数字说话这点认同,评审会最怕听形容词。
观察期发现新问题这个例子很真实,上线只是开始。
对等互联质量波动我们也遇到过,路由策略调整确实有效。
把容量规划写得这么具体,少见,收藏了。