七牛 9 月 22 日详细事故说明

[niuer]

尊敬的用户，您好！

2015.9.22 早上 10 点 02 分，由于七牛的华东节点供应商机房违规操作，使得同城双机房同时出现网络访问故障，导致我们现有的高可用多机房互备热备方案失效，使得大量七牛用户受到影响，我们表示万分的歉意。特此给出详细的情况说明，整改措施以及赔偿方案。

事故过程：

9.22 早上 10 ： 02 ，由于七牛的华东节点供应商机房违规操作，使得同城双机房同时出现网络访问故障，导致我们现有的高可用多机房互备中的热备方案失效，使得大量七牛用户受到影响该故障发生后。发现后，我们立即与机房协调，确认机房问题以及修复策略。同时开始通知客户并发出短信通知，以及微博和微信服务号通告事故（发送排队机制使得用户收到时间略有不同）。由于经过跟机房的沟通中获得准确修复时间，因此并未启动七牛的冷备容灾方案。经过协调处理，已于 11 ： 25 全面恢复。

针对事故，七牛将采取以下整改措施：

同城双机房互备选择不同供应商，以及继续推进两地三中心互备方案，更高提升容灾能力。

此外，根据七牛 SLA, （ SLA 入口： http://www.qiniu.com/about/sla ），我们将针对针对所有受此影响的七牛用户提供以下赔偿方案：

1 、针对所有非合同用户（包含使用量在免费额度内的用户），按故障期间的平均消费的 100 倍赔偿七牛抵用券。

2 、对合同客户，按照合同中所述进行赔偿。

注：

1 、故障时间为： 2015.9.22 10:02am 到 2015.9.22 11:25am 。

2 、针对非合同用户的赔偿抵用券将于国庆节之前发放完毕。系统会自动充值到您的七牛账户，抵用券使用有效期为三年。

最后，七牛再次向您道歉，我们要不断改善工作中的不足，提供开发者以更优秀的服务。

[wy315700]

不是挖掘机干的，，，

[tabris17]

挖掘机心里是崩溃的

[fange01]

@wy315700 微博好像是说挖掘机。

[wzxjohn]

然而并没有收到任何通知=。=

[Gandum]

什么样的挖掘机能同时挖断两个地方的线路？

[iwege]

请问是否要用户自己上 V2EX 才能看到故障？手机绑定是用来催缴钱的么？

[liuchen9586]

目测那机房的运维要收拾摊子滚蛋了

[ScotGu]

@wy315700
@tabris17
@fange01
可能是 华东节点供应商机房违规违规使用挖掘机导致的。

[bingu]

[xmoon]

😂

[kslr]

上次你们也是说短信邮件通知在排队发送，但是上次的故障通知截至到现在我也没有收到。

[aapu]

“违规操作”——规范还是很重要的

[embbnux]

表示没收到任何通知

[xfspace]

@bingu 骨干绝笔有冗余链路，没有冗余的骨干 我直播吃翔。

[webjin]

什么，内幕就是跟机房 idc 商价格谈不来，给断网了。运营商是不是北京天地祥云。

[webjin]

协调管理机房的老大，压低价格拿回扣， idc 商向电信拿资源也很贵。没什么利润，人家不愉快合作呗。呵呵

[webjin]

Idc 公司操作都是要客户授权的，不授权是不会操作的，欠费通知不缴费除外，直接断网，管你多大的 cdn 服务商

[webjin]

@xfspace 毛线骨干，七牛是到处各地找第三方 idc 机房合作，有些 idc 公司很小的。又不是直接向电信政企拿资源。

[bigtan]

@webjin 七牛的 cdn 不是租的么，你是说中心文件存储服务器吗

[MeiganFang]

@wzxjohn 同样没收到任何通知，而且还是标准合同账户！这赔偿方案也很模糊，就不能具体点么。