不懂就问，Optus这次故障的判断、检测、诊断、排除和预防的思路和方法如何？

Mushroomm

预防方法其实很简单：从上到下把某个南亚国家的雇员全开掉，换成负责任的员工。系统可靠性提高到99.99%.
估计做不到。那就等下次吧。不是再次泄漏就是再次全网崩。

b10862035

cisco 发表于 2023-11-9 20:20
全网都断了，家里网也断了，手机也断了，这工程师怎么去通知别人？
想给同事打电话，估计发现同事也都是O ...

趕緊去路上買1 dollars prepaid的card

zhongbingo

不是有内部人说， 设备太旧， 还要加速加量， 更新软件， 结果整个系统瓜了

wgy_u

作为optus网络工程师，我被禁言了

scoopy

足迹还真是卧虎藏龙，谢谢大神们的回复，容我慢慢领会慢慢加分。

zl5431

flatfall 发表于 2023-11-10 05:10
猜猜是CEO/CTO下课？还是攻城狮下课？

临时工。。。

NinaDavid

是不是华为以后要搞个路由器系统的GITHUB啊？如果允许，可以回滚。然后所有路由器重启，重新灌资料，也是很容易的事情。这样再不负责任的工程师，搞坏了，也不要紧。

rayki

tftp多少年前就在用了，每次配置前先copy到tftp，出错回滚啥的，这些至少16～18年前已经如此了。  现在早就可以自动化了。

Grange

我们路由器备份用rancid

Grange

谁能看到这篇文章，说是RCA出来了

https://www.smh.com.au/business/companies/inside-optus-day-from-hell-20231110-p5eiz0.html

h770806

yangkuan 发表于 2023-11-9 14:15
早上4点的outage，十有八九是planned work gone wrong，只能说到这里了
如果是hardware failure 或者链路断 ...

没错！optus断网后的第二天夜里也是4点多，也是手机无信号近1分钟，然后重新恢复正常。很明显在打包升级系统！第一次其实就是系统升级失败无法正常恢复而造成全网瘫痪！因为工作原因一直上夜班所以一旦断网就无法继续工作，那天真的叫苦.......

八级大狂风

h770806 发表于 2023-11-12 10:24
没错！optus断网后的第二天夜里也是4点多，也是手机无信号近1分钟，然后重新恢复正常。很明显在打包升级 ...

一般维护会发通知，这次却没有任何消息。

可能又是什么乌龙事件

flatfall

zl5431 发表于 2023-11-10 12:11
临时工。。。

那就更简单啦。背包虾早都提前找好啦。就是他啦

yang5637

Mushroomm 发表于 2023-11-10 09:30
预防方法其实很简单：从上到下把某个南亚国家的雇员全开掉，换成负责任的员工。系统可靠性提高到99.99%.
估 ...

已阅，完全同意。请HR三天之内，将这些混饭吃的渎职者全部开除。