【LinkedSee灵犀助力Meetup】朱颖航:大规模场景下的智能化硬盘故障预警及修复

【LinkedSee灵犀助力Meetup】朱颖航:大规模场景下的智能化硬盘故障预警及修复

2017-10-26 LinkedSee灵犀

11月4号,由南京大学PASA大数据实验室与CCF YOCSEF南京分论坛主办的南京大数据技术Meetup第十次会议 暨 2017 CCF BDCI数据大赛 YOCESF南京专场将在南京大学隆重举行。LinkedSee灵犀的技术总监朱颖航将会议上进行技术干货的分享。

朱颖航  技术总监

曾在百度系统部担任多年资深系统工程师,是百度“智能数据中心”项目的核心贡献人员,现任LinkedSee灵犀技术合伙人。在40W+服务器规模下,实现了从硬件数据采集,存储,分析和挖掘的全程经验,从而将服务器硬件监控带入细粒度覆盖,定位效能,自动治愈,提前预测的新时代,是服务器智能运维领域的绝对专家。

干货简介

在数据中心中,硬盘相关的故障占全部硬件故障的85%以上。随着大数据时代的到来,服务器数量大幅度增长,更多的存储需求、更低成本硬盘的使用,以及高温、高存储密度等技术的应用,硬盘故障及报废规模呈明显增加趋势。这对业务稳定、存储成本和运维效率都造成了严重的影响。基于数十万片硬盘近30个月的硬盘运行及故障大数据,使用机器学习技术,挖掘、分析海量数据,打造了可自动迭代的故障预测系统,支持全部厂商所有型号的 SATA 硬盘故障预测,准确率超过98%;同时与系统调度集成,能够提前避免故障对业务造成不良影响,有效降低云存储系统的平均故障修复时间。

关于大会

按照国际Meetup活动标准组织方式, 以中国计算机学会大数据专委会、
江苏省软件协同创新中心作为支持单位, 由南京大学PASA大数据实验室
发起,联合省内著名企业,组织了江苏省唯一的大数据技术Meetup技术交
流培训会, 面向区域范围内的高校师生和IT企业技术人员, 每2个月左右
定期举办一次技术交流培训会,邀请来自国内外的大数据技术专家作专
题技术交流报告

截止目前已经分别成功举办九次活动, 每次活动4-5个学术技术报告。 活
动反响强烈, 共吸引了2000多位来自高校和企业的专业技术人员, 推动了江苏省大数据技术研究、开发与应用的发展大数据Meetup已经成为一个江苏省内业界关注的品牌活动,省内诸多大型著名企业争相申请排队承办后期活动n吸引了100家左右江苏省内为主的企业和十几家江苏省高校研究单位华为、 中兴、 苏宁云商、华泰证券、烽火通信、国泰君安、摩根士丹利、畅途网、努比亚、亚信、南瑞、瑞中数据、星环科技、杰世欣、南京商数等南京大学、东南大学、南京航空航天大学、南京理工大学、河海大学、南京师范大学、南京农业大学、南京邮电大学、南京信息工程大学、江苏大学、金陵科技等高校。

时间: 2024-10-24 00:49:20

【LinkedSee灵犀助力Meetup】朱颖航:大规模场景下的智能化硬盘故障预警及修复的相关文章

和LinkedSee灵犀一起备战GITC全球互联网技术大会

互联网就像一张无形的网,并且正在以不可见的速度影响着人类的生活,我们享受着互联网带给我们的便利,也孜孜不倦的追随互联网的脚步.技术虽然没有边界,但可以被感知,2017年11月23日-11月24日,在全球互联网技术大会上,和LinkedSee灵犀一起感知这个奇妙的互联网世界吧! 什么是GITC GITC全球互联网技术大会由麒麟会主办,iTech Club(互联网技术精英俱乐部)协办.定位为专业.开放.国际化的大型会议会展平台,以汇聚行业精英.促进技术交流.加深商务合作.推动行业发展为大会宗旨,促进

[转]面向GPU的多LOD因子的大规模场景可视化策略

直接附上原文链接: 1.面向GPU的多LOD因子的大规模场景可视化策略 2.Real-Time Dynamic Level of Detail Terrain Rendering with ROAM

LinkedSee灵犀

a.四重通道,随时响应 借助电话.微信.短信.邮件四种渠道,让告警信息及时.迅速的传达到你 在通知告警时,附带故障处理页面的链接,让你随时随地都能处理,快速响应和解决故障 b.团队协作,高效聚焦 利用多级告警升级策略,逐级进行通知,用多重防线杜绝漏网之鱼 成员轮流处理告警.特定告警专人通知,保证团队每个人的工作效率 c.使命必达 通过主备渠道的轮流查询,最大程度地避免堵塞,防止服务商卡死 通过循环通知故障,拒绝故障下沉,不让你漏掉任何重要报警 d.压缩去重,减量保质 通过相同告警的裁剪去重,避免

碧桂园营销院长朱晓波-新常态下拉动业绩的三驾马车-业务链、人才链、文化链标杆房企的顶层设计解码

新常态下拉动业绩的三驾马车-业务链.人才链.文化链标杆房企的顶层设计解码课程背景:2015年房地产榜单已经揭晓,万科以2600亿的成绩继续领跑:恒大以49%的增长成为最大黑马:TOP100房企的入榜门槛为104亿元,同比增长48%.恒大海花岛以日销售122亿的世界纪录成为年度神盘.一连串的数据显示白银时代不缺赚钱效应,新常态下依旧演绎强者恒强的逻辑.数字背后留下的是一连串的思考:标杆房企跨越式的业绩增长是如何形成的?支撑这种增长的背后动因是什么?成功的关键因素是什么?标杆房企的内在基因是什么?究

Citrix Profile Management 和 VDI系列讲座之三:大规模环境下的扩展架构设计

说好了要写三期的,上周在出差,最后一期姗姗来迟,还望大家见谅,特别是那些给我回信问我问题的XD们. 咱们第一期讲了如何配置CitrixProfile Management 和 Folder Redirection,第二期讲了性能参数调优,这第三期就升华一下,探讨一下如何在大规模环境中做到文件服务器或者是NAS设备的扩展,同时如何管理用户使用这些设备? 相信你也知道,如果你的环境里面只有500个并发的XenApp用户,或者是500个VDI桌面,那我想这个环境的搭建不会太复杂,一台文件服务器或者是一

你去过(gan)大(huo)年(che),Down机别烦我

相传,一年一度的中式春运大迁移 正式拉开了序幕... 抢不到火车票的我, 起早贪黑,废寝忘食各种软件各种刷 好不容易捡漏刷到火车票 忙活了一年,终于可以回家过年啦 仰天狂笑,哇哈哈哈哈 嘀---嘀---嘀--- 您有10条未读新消息 赶紧打开手机一看,我了个去 一堆严重故障告警 就在此时,电话铃声响起 "小王啊,机房设备故障,赶紧过来吧" "李总,那个啥,我正去火车站的路上呢-" "小王啊,客户这边正着急呢,不行改签吧,先把故障处理好再回去" 一

Dubbo下一站:Apache顶级项目

导读: 近日,在Apache Dubbo开发者沙龙杭州站的活动中,阿里巴巴中间件技术专家曹胜利(展图)向开发者们分享了Dubbo2.7版本的规划. 本文将为你探秘 Dubbo 2.7背后的思考和实现方式. 作者:(按姓氏拼音排序,排名不分先后) 曹胜利(展图):Apache Dubbo Committer. 刘军(陆龟):Apache Dubbo Committer. Dubbo 2.7 将围绕 异步支持优化.元数据改造,引入JDK8的特性.Netty4.0的特性以及MetricsAPI 5个方

阿里巴巴的云原生与开发者

作者 | 李响 阿里云资深技术专家 关注"阿里巴巴云原生"公众号,回复关键词"容器",可下载云栖大会容器专场全部 PPT 摘要:利用云原生技术构建应用简便快捷,部署应用轻松自如,运行应用按需伸缩.如今,云原生已经成为下一代技术发展的趋势.在?2019?杭州云栖大会开发者峰会上,阿里巴巴资深技术专家李响就为大家分享了阿里巴巴的云原生技术与开发者的那些故事. 为什么选择云原生? 云原生的本质目标就是充分释放云计算带来的红利,阿里巴巴希望开发者能够使用云上极致弹性的资源交

docker容器网络通信原理分析

概述 自从docker容器出现以来,容器的网络通信就一直是大家关注的焦点,也是生产环境的迫切需求.而容器的网络通信又可以分为两大方面:单主机容器上的相互通信和跨主机的容器相互通信.而本文将分别针对这两方面,对容器的通信原理进行简单的分析,帮助大家更好地使用docker. docker单主机容器通信 基于对net namespace的控制,docker可以为在容器创建隔离的网络环境,在隔离的网络环境下,容器具有完全独立的网络栈,与宿主机隔离,也可以使容器共享主机或者其他容器的网络命名空间,基本可以