腾讯云丢失数据被索赔千万真正原因:运维人员两次违规操作

腾讯云

近日,腾讯云的客户北京清博数控科技有限公司所属“前沿数控”平台一块操作系统云盘发生故障,导致文件系统元数据损坏。

腾讯方面提出了总金额136,469元的“赔偿+补偿”解决方案,前沿数控则索赔11,016,000元,被腾讯认为过高,双方未达成一致。

现在,腾讯云发布了一份关于客户“前沿数控”数据完整性受损的技术复盘,对客户业务所受影响表示诚挚歉意的同时,详细解释了此次故障发生的根源,以及将采取的措施。

腾讯云经过复盘发现,故障缘起于因磁盘静默错误导致的单副本数据错误,再加上数据迁移过程中的两次不规范的操作,导致云盘的三副本安全机制失效,并最终导致客户数据完整性受损。

当天上午11:57,腾讯云运维人员收到仓库I空间使用率过高告警,准备发起搬迁扩容。

14:05,运维人员从仓库I选择了一批云盘搬迁至新仓库II,为了加速搬迁,手动关闭了迁移过程中的数据校验。

20:27,搬迁完成之后,运维人员将客户的云盘访问切至仓库II,同时为了释放空间,对仓库I中的源数据发起了回收操作。

20:30,监控发现仓库II部分云盘出现IO异常。

腾讯表示,数据搬迁过程中的违规操作主要如下两点:

第一是正常数据搬迁流程默认开启数据校验,开启之后可以有效发现并规避源端数据异常,保障搬迁数据正确性,但是运维人员为了加速完成搬迁任务,违规关闭了数据校验;

第二是正常数据搬迁完成之后,源仓库数据应保留24小时,用于搬迁异常情况下的数据恢复,但是运维人员为了尽快降低仓库使用率,违规对源仓库进行了数据回收。

因这些错误操作的连续影响,导致该客户数据完整性受损,给客户的正常业务运行造成影响,腾讯云再次表示最诚恳的歉意。

改进措施方面,腾讯云提出了两点:

首先,将全面审视所有的数据流程,涉及数据安全的流程自动化闭环,进一步提升常规运维自动化和流程化,降低人工干预,同时把全流程的数据安全校验作为系统的常开功能,不允许被关闭。

其次,针对物理硬盘静默数据错误,在当前用户访问路径数据校验自愈的基础上,优化现有巡检机制,通过优先巡检主副本数据块、跳过近期用户访问过的正确数据块等方法,加速发现该类错误,进行数据修复。

另外,腾讯云建议用户开启免费的快照功能,对重要数据进行定期备份。

对于索赔和赔偿问题,腾讯云暂未披露更多进展。

除原创内容外其余均系来自互联网或投稿,观点仅代表作者本人,不代表本站立场!所有内容相关事宜请联系860362868@qq.com

本文链接: http://www.home0311.com/a/126.html (转载请保留)

(1)
上一篇 2018年8月10日 下午2:09
下一篇 2018年8月11日 上午12:04

相关推荐

  • 石家庄因系统升级影响 量控卡表只能在营业厅交电费

    近日,记者了解到,石家庄市区从今年8月1日起,因系统升级影响,量控卡表(电子式预付费电表)将不能继续前往36524便利店等电费代缴网点进行缴费,可前往供电公司营业厅交电费。 据悉,…

    国内 2018年8月12日
    11.1K
  • 55种降价药品名单目录

    为保障人民健康,增强群众的获得感和幸福感,持续降低虚高药品价格,切实减轻患者负担,自11月1日零时起,我市将全面执行第三批国家组织药品集中采购中选结果。本次集中采购55种药品,覆盖…

    2020年11月3日
    6.2K
  • WordPress去除分类目录“category”路径的三种方法

    不少折腾WordPress的朋友都希望去掉分类链接中默认就添加的 /category/ 目录标志,网上很多这方面的教程,据子凡目前所知,应该有三种方法可以去除分类category标…

    国内 2018年8月9日
    2.8K
  • 大信橱柜终身免费保修 欺骗消费者改为收费维修

    13、14年 购买橱柜时,碰到大信橱柜的宣传,“终身质保 ” 并得到销售人员的确认,如今除了问题,联系不到本地售后,就联系河南郑州总部的客服,客服却说是一年质保,终身维修是收费的,…

    国内 2019年8月26日
    11.2K
  • 为什么移动、电信、联通三大运营商,只对新用户优惠大?

    关于三大运营商只对新用户优惠大,对老用户优惠少的话题,一直以来辈受争议。对于运营商来说,用户就是自己攫取利润的基石。纵然运营商对单个用户并不放在心上,但为了争夺海量用户资源还是展开…

    2018年8月10日
    2.2K
  • 2018年7月份汽车销量排行榜

    据今日乘联会最新数据统计显示,7月份狭义乘用车零售销量达156.7万辆,同比增长-5.5%,环比增长-7.1%。1-7月累计销量达1253.9万辆,同比增长2.7%。· 7月份轿车…

    2018年8月9日
    2.5K
  • 腾讯王卡新老用户充话费赠送QQ超级会员

    原标题:腾讯王卡推新活动:充话费赠送QQ超级会员 近日,腾讯王卡上线了一个新活动充值话费赠送QQ超级会员,已经有大王卡的用户充值 50 元赠送一个月QQ超级会员,充值 100 元赠…

    2018年8月10日
    2.1K
  • 全国首张区块链发票来了!报销再也不用贴贴贴发票

    成功报销一张发票有多难? 如果你还在使用纸质发票(忽略排很久队开票的环节)—— 1.   半小时确定发票存活 2.   半小时确定发票真假 3.   无法估量的时间贴贴贴 4.  …

    2018年8月11日
    2.3K
  • 手机QQ下方的看点怎么关闭?

    记得有一天在QQ群里突然有位宝妈说:“你们发现了没有,QQ最下边一行多出来一个看点”,当时看了一下确实我的也有,打开是腾讯新闻,没有在意,但是最近经常打开QQ的时候,看点上有个红色…

    2018年8月11日
    15.4K
  • 拼多多9.9元“蓝月亮”洗衣液与正品蓝月亮实测对比

    话说,我的室友是电商平台“拼多多”的忠粉!前两天,当我准备借他的洗衣液用的时候,发现了异样。咦!你这“蓝月亮”怎么和我之前买的蓝月亮有点不一样? 他告诉我,这不是蓝月亮,只是外观上…

    2018年8月11日
    15.2K