19时25分00秒之后,断崖式下降。
抖海、头条、洋柿子小说以及公司其他国内业务中,来源地被IP地理库、运营商接入信息和客户端定位共同识别为西安的在线请求量,在短短两秒内同时归零。
赵宝明脸上的困意瞬间消失,一下子清醒了,
“可可,把时间窗口拉到一分钟。”
陈可已经在操作。
一分钟粒度展开成秒级数据。
19时24分58秒,正常。
19时24分59秒,正常。
19时25分00秒,大规模连接断开。
19时25分01秒,QUIC会话数量骤降。
19时25分02秒,TCP存量连接快速清空。
19时25分03秒,西安区域新建连接数接近零。
19时25分05秒以后,只剩下极少量因IP地理库误差被标记为“西安”的请求,还在零星跳动。
陈可皱起眉,“啥情况,看着不像机房故障啊。”
赵宝明把咖啡放到一边。
如果只是字节某个边缘节点发生故障,流量应该按照调度策略迁移到邻近节点。DNS调度、AnyCaSt路由以及运营商侧的流量工程都会让业务出现时延升高、回源比例上升或者局部丢包,却很难让一个千万级别人口城市的终端请求同时消失。
更何况消失的不只有视频业务。
后台统一可观测平台已经开始连续报警。
陕西西安区域活跃设备数异常。
西安区域边缘缓存节点可用性异。
一条接一条。
几十秒后,报警被自动聚合,严重等级开始上调。
坐在另一排的网络工程师宋文泽突然叫了一声。
“赵哥,过来看这个。”
赵宝明走过去。
宋文泽屏幕上打开的是网络侧数据。
移动、电信、联通。西安区域全部出现异常。
宋文泽把BGP监控页面调出来。
“陕西相关公网前缀大部分还在路由表里,没有发生大面积撤销。上游AS也正常。也就是说,从互联网的路由控制平面看,这些地址很多仍然‘存在’。”
陈可站在两人后面,接了一句,“可没人用了。”
办公室安静了下来。
19时26分11秒,周启明拿起内部电话。
“值班经理呢?”
“会议室。”
“叫顾航过来。”
不到一分钟,基础设施值班经理顾航推开门。
相邻推荐:霸道妊妻爱上吊丝代 主角玉婉楚瑾玄我卖乖求离开世子爷却不愿放手 末日安全屋求生指南 财迷王爷败金妃:暮染染的奇幻账本 爱上漂亮女毒枭最新章节_锦鲤发发连载:凌晨两点的追更人 The Last Chronicler(最後的记述者) 无羁 神级师尊系统:返还就变强 魔法师传奇 最初之後:我怎麽就成神了? 当彼岸花绽放之时 蜀山掌门系统 Coeus科俄斯智力之神 陪妈妈打工 小小武士家族开始征服世界 身为一位司机,我负责带人穿越 旧书摊那本会改字的《道德天书》 开星舰,炸骑士,抓超大号女精灵 【说爱前,先分手】《伪术 · 屍》 灶台后墙缝里的纸条 都市悟道者 贺少的闪婚暖妻小宝身世奇幻:玉锁裂开那夜 黑玻璃by盒粒结局番外 帕笛芙夫人意大利:旧书店没有免费全文阅读 夜班车上的发光毛毛 《身爲王的,我此刻只想谈恋爱》 去部队探亲被全队共享小说免费阅读 唐三浮荡海神九考全文阅读免费看:沉船书店里的吸魂阵 散场后11H高完整版_兔子bunny:七排九座的兔子 欢迎光临魔法学校