全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 6327|回复: 62

关于MOACK 7日宕机情况,我来切腹谢罪了

  [复制链接]
发表于 2020-3-10 00:49:10 | 显示全部楼层 |阅读模式
本帖最后由 蘑菇 于 2020-3-10 01:05 编辑

坛子里面应该有一小部分使用过我们的服务器,7号的凌晨的维护公告发出去后,事情突然不可控起来。。。

3日开始发送公告,宣布7日凌晨维护,窗口期6小时,不可用时间2~3小时

原本真的只是一次简单的割切和升级。。。万万没想到


电力设施和预期不符,马上面临夏天,随着机器的增加,温度肯定会不可避免的升高
(备注:一台恒温恒湿机吃40KW的电力)

6日晚间11时左右:
确认容量增加会带来风险,受限于我们的UPS和各种电力设施,于是临时决定把所有的小伙伴叫起来,更改割切计划直接变为转移计划,转移到我们二期机房内
二期机房我们是在T3数据中心内包了一层楼,原本主要是做托管业务,自用的不在那里,这次更改方案,确实比较突然,导致事情不可控,当时情况是这样的,楼底下还有几个卡车,还在往上运。。。




现场比较乱,看的头疼我们自己更头疼

4点钟左右:
转移服务器后转移后因运输过程,导致标签多多少少的有掉落,更加延长了恢复时间,我们内部系统和标签息息对应,保障客户的正常独立运行

因为我们没有专业的售后团队,基本都是技术员兼职售后,所以此期间,很多人通过电话,邮件,工单等形式联系我们的时候,我们所处的环境很吵闹,导致没有做到100%的响应,我们意识到了自己的不足,对此深表歉意,我们会在短时间内完善我们的售后团队,给广大客户提供更加完美的售后响应
我们破戒在疫情严重的时候,一起点外卖,不下班不外出,不要命的加快恢复速度


8时:
上架完成后,因部分端口错误,导致部分客户继续处于断网期间,此时,我的内心是崩溃的。。。。
完全恢复时间继续拖后,此时已经过去了24小时。。。

我们继续花了几小时来整理端口,重新插线理线,做最后的巡检,终于保证了99.99%的客户可以正确联通
不敢说100%,怕有疏漏我被砍死



此次事件,我们的团队被我逼迫所有人都是30小时以上没回家没睡觉,甚至连眯一眼都没有,对此我很心情复杂,一方面代表客户的恢复时间过长,一方面又心疼

危机中见生机,危机导致了我们失去了很多客户的信任,但是我们却成功看见了自己的不足,以及最可怕的拍脑瓜决策,我们会在短时间内,完善团队管理机制,加强决策审批流程,增加客户维系系统

同时对于此次受影响的客户,我们提供我们承诺的30倍赔偿,此次断网时间比较零碎,有的客户很快就恢复了,有的长达30小时,故统一按照24小时的标准进行赔付,即所有客户都可得到24*30的额外使用时间,
未受影响的客户以及准客户,我们将在3月中旬将我们所有型号的服务器价格调整为29美金,例如双路E5-2630/32G/480G SSD 10M带宽(CN2/KT/LG混合,电信双向CN2) 官网只要有的配置,全部29美金
3月中旬我们也将同时启用24小时QQ/微信等在线沟通渠道


再次对不起各位的信任

顺手PO个机房照片



发表于 2020-3-10 09:03:23 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2020-4-2 16:36:42 | 显示全部楼层
刘飞儿 发表于 2020-4-2 16:34
机房大手笔哦
服务是真的没话说

这拍的有点不是时候.....  太不稳了. 今天又挂了
发表于 2020-3-10 07:14:04 | 显示全部楼层
  29刀的E5比较感兴趣                                                                                                                                                            ——来自楼主的小雏菊
发表于 2020-3-10 00:55:32 | 显示全部楼层
本帖最后由 蝼蚁般的存在 于 2020-3-10 02:08 编辑

这图床看得我难受,楼主下次用imageoss吧。

编辑个回复,我记得在他家买过个机器然后刚好那天晚上线路炸了,申请退款,售后很及时的给我退了款,这个需要点赞!!
发表于 2020-3-10 00:57:52 来自手机 | 显示全部楼层
感觉很厉害
发表于 2020-3-10 01:03:43 来自手机 | 显示全部楼层
哈哈下次还是一台台来吧!
发表于 2020-3-10 01:04:57 来自手机 | 显示全部楼层
膜拜一下大佬,哈哈
发表于 2020-3-10 01:10:40 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
发表于 2020-3-10 01:18:26 | 显示全部楼层
前排(((
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-4-20 00:47 , Processed in 0.069334 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表