世界服装鞋帽网首页 > 正文

从绝望到希望:微盟的惊魂168小时

2020/3/6 15:53:00 来源: 评论(0)8835

绝望希望惊魂

“我们幸免于这次‘天灾’,却不料一场‘人祸’让我们处于无比艰难的境地。”2月27日,微盟创始人孙涛勇说出这句话时,微盟正面临公司历史上最大的危机。

2月25日,微盟在港交所发布一则自愿性公告,对外公布2月23日19点以后公司SaaS业务生产环境和数据遭到破坏的消息;2月28日,微盟恢复了所有的SaaS业务生产环境,但没有找回全部的备份数据,而是仅恢复了微站产品的备份数据;3月1日20点,数据才全部找回。

如果这部分数据无法找回,那对微盟的影响将难以想象。2013年创立的微盟,于2019年1月登陆港交所,根据其2019年中期财报,SaaS业务的收入占微盟总收入33.4%,毛利润占比48.5%。

事实上,微盟此次遇到的并非员工误操作导致的数据丢失,而是一次人为恶意破坏。此前,有位多业内人士向记者表示,这种情况下想完全恢复如此大规模的数据,几乎是不可能的事情,但微盟很幸运。从数据丢失到数据找回,微盟经历了惊魂168小时。

数据消失

2月23日下午6点多,微盟服务器发出故障报告,排查后发现,所有服务器都处于服务无法响应的状态。紧接着,技术人员重启了其中一台服务器,结果发现系统内所有的数据都不见了。

“这个时候情况已经非常紧张,因为服务器是大面积出现故障,这可能有两个原因,一是被入侵,二是被故意破坏。”腾讯云运维中心和客户服务部门负责人徐勇州表示。

腾讯云随即安排两条业务线同时进行进一步排查,一条线是服务器团队,他们继续对服务器进行检查,最终确定,微盟服务器上所有文件已全部丢失;另一条线是安全团队,他们通过与微盟的技术人员合作,定位到是一个经授权的账号进入数据库进行了删除操作。

做技术工作的人有时相互开玩笑会提到“rm -rf /* ”,这是Linux系统下的文件删除命令,它将删除包括系统和数据在内的所有文件,且不可恢复。

而微盟,正是遭遇了这一黑天鹅事件。据介绍,微盟除了数据库被删除外,备份的服务器也无法登录,这意味着备份数据也被一并删除。原因是公司一位核心运维员工删除了相关业务数据。

数据恢复其实是一个非常专业的领域,正常来说,都是由企业主导,云厂商作为协助。但微盟当时已经没有更多办法,只能依靠腾讯云,而腾讯方面面对这个情况,其实信心也不大。

“数百T的数据,连备份都被删除了,还想在较短的时间内恢复,这在过往的历史上还没发生过。我们咨询了几家数据恢复公司,他们均表示这种情况能恢复20%左右的数据就非常不错了。”徐勇州坦言。

紧急救援

通常来说,数据恢复工作可以分为三个阶段:第一步,是控制受损面,这是要保证那些有机会找回数据的服务器不要再发生任何问题;第二步,就是通过专业软件找回数据;第三步,则是公司进行数据验证、上线联调等操作。

其中,最关键的是前两步,如果前两步能顺利完成,那数据也就顺利找回了。这次微盟的数据找回工作,也基本是按照这个流程。

徐勇州表示,按照第一步,他们首先要为源数据做镜像拷贝,以保护好源数据。但通过对微盟情况的分析,他们觉得无论是传统的网络对拷还是硬件对拷,在时效性和安全性上都无法满足。

于是,腾讯云团队做了一个大胆的决定:越过镜像拷贝的步骤,将另外一块系统盘安装到原有服务器上,通过新系统盘加载OS和数据恢复软件,直接对服务器进行扫描。

“在进行操作时,很多同事无法到达现场,我们一群人就通过视频连线,对前方的每一步操作进行确认”,徐勇州回忆说,整个过程非常紧张,因为这是不可逆的过程,做错任何一步,都无法挽回。

好在最后有惊无险,源数据的读取工作顺利完成,接下来的挑战是数据提取。2月26日,腾讯云团队拿到第一批次数据,导入验证后也正常,这让他们非常兴奋,感觉胜利近在咫尺。但他们很快发现,这些都是截至2月17日的数据,即便这份数据完整,也仍有一周的数据丢失。

整个团队的心情随即再次落入谷底。但事实上,通过前面的一系列操作,已经证明数据仍然存在,只不过当时希望找回的是全部数据。

于是,腾讯云团队又重新制定了“打捞”方案。这次,他们决定按照数据公司的恢复方案,对磁盘的每一“块(block)”都进行扫描,与此同时,腾讯云团队还制定了一个B计划,即从服务器的OS层进入打捞数据。

“B计划是备用方案,它需要海量的尝试和数据验证,非常耗时。一旦需要采用B计划,那微盟的数据肯定无法按预期完成,具体的时间也难以确定。”徐勇州说。

幸运的是,第一台服务器的第一“块(block)”便扫描成功,拿到的数据经验证也是完整的,这说明A计划可行。只不过,通过这个方式得到的数据大小,都远远小于微盟核心数据的大小,这就像被打乱了的巨大拼图,想要获得完整数据,需要进行拼接。

“数据越大,拼接的难度也越大。但好在微盟的备份机制比较完整,数据类型也相对统一,最后通过一系列技术手段,终于完成了拼接工作,微盟的数据也成功找回。”徐勇州说。

3月2日,微盟发布公告称,截至2020年3月1日晚8点,在腾讯云的协助下,公司备份的数据已经找回,并将于3月2日凌晨2点至上午8点进行数据恢复上线演练,于3月2日晚10点至3月3日上午9点,进行数据恢复上线。

3月3日上午,微盟宣布,截至2020年3月3日上午6点,公司的SaaS业务数据已恢复上线。

敲响警钟

数据丢失,微盟损失惨重。在2月25日正式披露数据丢失后,微盟的股价连续三日大幅下跌,从6.18港元一度跌至4.8港元,跌幅超20%。而针对商家,微盟则准备了1.5亿元的赔付资金,并提供了现金赔付和流量赔付两种赔付方式。

一位信息安全专家告诉记者,人为因素,现在已经是引发企业数据安全问题的最主要导火索,有些就是员工的一个误操作,导致服务器崩溃或者删除了核心数据库,另外还有就是像微盟遇到的恶意破坏,这种危害性更大。

针对这一问题,徐勇州向记者表示,企业的数据安全不能仅依靠哪一项单独策略,而是要有一整套完整的体系,且每一个环节都不能有疏忽。相比传统的数据管理,在云上,数据的安全将会得到更多保障。

比如通过云账号管理权限的管控,可以让企业对账户下资源的访问权限做到粒度可控,比如允许某些子账号只拥有某个COS存储桶的读权限,而另外一个账号拥有该COS存储对象的写权限等,这样可以大大降低误操作或非必要操作引起的数据损坏、丢失的风险。

 

责任编辑:第一时间
世界服装鞋帽网版权与免责声明:
1、凡本网注明"来源:世界服装鞋帽网sjfzxm.com"的所有作品,版权均属世界服装鞋帽网所有,转载请注明"来源:世界服装鞋帽网sjfzxm.com",违者,本网将追究相关法律责任。
2、本网其他来源作品,均转载自其他媒体,目的在于传递更多信息,不表明证实其描述或赞同其观点。文章内容仅供参考。
3、若因版权等问题需要与本网联络,请在30日内联系我们,电话:0755-32905944,或者联系电子邮件: 434489116@qq.com ,我们会在第一时间删除。
4、在本网发表评论者责任自负。
跟帖0
参与0

网友评论仅供其表达个人看法,并不表明本网同意其观点或证实其描述,发言请遵守相关规定

相关阅读

陈大鹏:同播社会责任之种 共燃纺织希望之光

协会动态
|
2020/11/4 18:27:00
10

爱沙尼亚议长内斯托尔:希望中欧班列开到塔林港,提升中欧双向贸易往来

环球视角
|
2020/9/24 22:32:00
42

惊魂一夜,美股V型震荡!科技股这轮下跌,是否引发崩盘式大跌?

即时新闻
|
2020/9/5 11:32:00
21

“没有药”与“天价药”下罕见病患者的希望:多方共付援助计划

专业市场
|
2020/8/26 11:32:00
19

纺织人心存担忧:下半年的外贸市场还有希望吗?

市场前瞻
|
2020/8/13 20:27:00
17

据报:山东如意拒绝贱卖莱卡,而是希望将其上市

新闻速递
|
2020/8/7 18:07:00
14

纺织服装半年度策略:疫情下的新希望

面料辅料
|
2020/7/17 11:23:00
19

从“全球的希望”到“跌落神坛”:瑞德西韦的魔幻商业化之路

专家时评
|
2020/7/1 8:02:00
10

专题推荐

阅读下一篇

国产试剂盒出海“抗疫” 临床验证和成本双重优势

近年来,随着政策的扶持力度加大,国内在检测试剂研发方面发展较为迅速,分子诊断试剂盒基本已经实现国产化

返回世界服装鞋帽网首页
关注公众号 关注公众号
手机看新闻 手机看新闻
展开
  • 微信公众号

  • 电话咨询

  • 0755-32905944