近日,记者了解到,百度一直以其领先的研究和开发近三年的
系统工具hdoctor。这种创新工具的应用,使
故障修复率低于SATA
硬盘比SAS硬盘的成本和可靠性,可以有效地
解决大数据时代的问题,大容量SATA硬盘应用的高失败率的
背景下,低效率
运行和存储的成本
控制,大大降低了云存储为采购成本的一个坚实的基础。
大数据突出
显示硬盘故障的问题。
今天,数据量正在迅速膨胀。据IDC统计,在2012的总数据达到了2.8zb,和2020,它预计将达到40ZB,相当于57倍的沙滩上,和地球将有5247gb数据人均。海量数据使世
界面临数据存储是一个严峻的挑战,其中有技术和成本的双重压力。硬盘,作为数据中心的
核心部件,具有修复率高、成本高,已成为诸多挑战的一个主要挑战。
据统计,在数据中心,硬盘相关故障占所有
硬件故障的85%以上,随着大数据时代的到来,
服务器数量显著增加。更多的存储需求,成本较低的硬盘的使用
情况,以及高温、高密度存储等技术的应用导致了显着增加的硬盘故障的大小和被丢弃的应用。这对企业经营的稳定性,严重
影响了存储成本和运营效率。如何减少返工率一直困扰着行业。
Because hundreds of PB data are stored, Baidu, the world's largest Chinese search engine company, has millions of hard disks, which is very urgent to solve the problem of rework rate.It is in this context that Baidu has made its own innovation three years ago and led the development of the system tool hdoctor.
百度hdoctor五维集成创新
hdoctor的主要结果是,SATA硬盘返修率低于SAS硬盘。
众所周知,SATA硬盘的修复率超过了SAS硬盘的40%。以著名的硬盘制造商的最新产品为例:企业10ksas硬盘年度10ksas率(AFR)是0.44%,和空燃比的7.2ksata硬盘在近线水平是0.63%。百度正在使用的工具,不仅减少了60%的SATA硬盘修复率,实现整体的过程自动化的所有硬盘故障
处理及废料清除,通过存储系统的集成和
管理,处理与硬盘的进展的潜在故障,大大降低了对企业失败的影响,降低
维护成本,投资和人力物力。可以说,百度是以较低的成本越来越高质量保证。
结果的成绩,主要得益于hdoctor整合的五个维度:
首先,硬盘故障
检测。hdoctor通过日志增量监测,
设置,
错误类型,
磁盘运行状态
检查环节的集成系统,以10秒99%的故障监测,覆盖所有模型;经过验证,硬件检测精度分析
方法和硬盘厂商(FA)为。
第二,硬盘维修,故障在60秒内修复60% SATA硬盘,包括潜在的故障部门修理,坏块屏蔽,硬盘
文件系统和磁盘阵列状态修正,没有准备好或超时的处理,数据/
硬件故障排除和复位共同驱动移位
操作故障处理。没有hdoctor使用,因为业务稳定性的要求,一旦出现错误,业界通常的做法是更换硬盘,使维护成本很高。
第三、硬盘故障预警,为近30个月的硬盘运行和故障数据基于机器
学习技术的使用块硬盘几十万,海量数据的挖掘和分析,可以
创建故障自动迭代预测系统,预测
支持所有厂商的SATA硬盘故障在所有模型中,准确率超过98%;同时,系统集成和调度,避免提前对企业的不利影响的故障,有效地减少平均修复时间(MTTR)云存储系统。
第四,硬盘被废弃和擦除。最后,我们维护云数据安全并集成三个国际认证安全擦除解决方案。JBOD和RAID环境下,我们可以将各种存储介质包括SATA,SAS,SSD和闪存的快速、高效、安全的。
第五、自动操作和维护支持。hdoctor提供各类硬盘故障检测、维修、在线、离线、修复、全方位自动化API单检测操作和维护,同时,定期维修和硬盘运行状态信息的标定,以及工具本身的运作机制也一个自我反馈和自我维护。
据了解,hdoctor已经走过了三年。故障记录每月基于大数据的积累,与硬盘相关的警告、负载、
功耗、
性能和数十亿美元的水平
温度,迭代
升级,降低故障率,同时提高云存储系统的运行效率和可靠性,有效地帮助硬盘资源调度、电源管理、硬件分级存储,减少大型的云存储运营成本。