扛住了双十一6年430倍压力增长的阿里云凭什么?

还记得2015年7月,阿里集团宣布对阿里云战略增资60亿元,用于国际业务拓展、云计算、大数据领域基础和前瞻技术的研发等。阿里巴巴集团CEO张勇认为,阿里云已迎来最好的机遇,在技术和商业上将更进一步,成为DT世界的引擎。

2015年双十一期间,阿里云就迎来了60亿增资后的首次大考。新型支付蚂蚁花呗、金融级自研数据库Oceanbase、混合云管理技术、异地数据中心多活、大数据处理平台、数据可视化大屏等多项自主研发关键性技术集体亮相今年双十一战场,成功闯过了一天之内承压912亿交易额的生死大关。

“今年创造了一个新的记录:每秒钟订单创建14万笔,支付达到了每秒8.59万笔。2009年双十一订单创建每秒钟只有400笔,今年相当于6年前的350倍左右。2009年双十一支付能力是每秒钟200笔,今年是6年前的430倍左右。这几年就是一个飞速增长的过程。” 阿里巴巴集团首席风险官、阿里双十一技术总指挥刘振飞如是说。

如何抗住6年430倍的增长?

那么,阿里云是如何抗住6年430倍的压力增长?最关键的就是采用混合云架构,把部分压力洪峰从专有云分流到了公有云上。原先,整个淘宝、支付宝、天猫都是构建在专有云平台上,但由于双十一期间的瞬间交易暴增,为了峰值而无限扩建专有云显然并不经济环保,于是自然就想到了采用可弹性伸缩的公有云。但如何把这么庞大的系统部署到公有云平台,特别是双十一这种量级的核心支付交易系统,目前在全世界还没有这样的先例。

阿里云高级产品专家、阿里云双十一队长何云飞告诉记者,阿里巴巴经过了15年的系统建设后,形成了非常复杂的内部系统,一个订单要经过多个系统的流转和数据库的交互,而把这样庞大的内部系统搬到公有云上,再与专有云对接形成混合云架构,其难度可想而知。其中,除了公有云上的系统要与专有云上的内部系统全面兼容、平滑过渡外,最重要的是公有云上的电商核心系统必须流畅运转起来。除了云服务器、负载均衡、RDS云数据库等阿里云三大件外,今年还起用了尚未对外发布的自主研发数据库OceanBase,以及去年刚发布的大数据产品ODPS。

历经五年研发出来的阿里云海量关系型数据库OceanBase,这次双十一期间承担了支付宝100%的交易流量,运行平稳、零漏单、零故障。分布式数据库OceanBase,把数据的读和写进行分离,满足了一秒钟创建14万笔交易、完成8.59万笔支付的峰值要求。而去年双十一,OceanBase只是小范围练兵,承担了支付宝10%的交易流量。据阿里介绍,今年6月开业的网商银行,其底层数据库就全部采用OceanBase,明年还将通过公有云平台对外开放OceanBase。

而阿里云自主研发的大数据处理平台ODPS,则承担了今年双十一淘宝、天猫、支付宝、菜鸟等所有大数据处理工作。今年是阿里云ODPS从研发以来的第六个年头,在刚刚结束的2015世界Sort Benchmark排序比赛中,阿里云ODPS用377秒完成了100TB的数据排序,打破了此前Apache Spark创造的1406秒纪录。而ODPS的实时计算系统StreamSQL,则在今年双十一当天处理了上万亿条消息。ODPS是阿里集团30多个事业部唯一的大数据平台,目前正在通过阿里云逐步开放给外界使用。

保障阿里云闯过今年双十一考验的还有一项1000公里以上异地双活数据中心技术。该技术可实现多地数据中心像一个数据中心一样工作,即使某一处数据中心出现故障,双十一在线业务仍然能够快速恢复正常运转。蚂蚁金服首席技术官程立说,今年真正实现了距离一千公里之外的华南华东两地数据中心多活,华南区支持了60%的支付、华东区支持了40%的支付,这个能力的突破意味着蚂蚁金服的支付系统可支撑每天100亿笔支付。

首次上阵抗压的新型支付

“因为是第一次参加,可能出现的各种突发状况,完全没概念。”蚂蚁花呗的技术负责人赵进透露,直到11月10日晚上11点多,团队还在进行压力测试,做各种预案演练,以保证端口不会挂掉。

在此之前,蚂蚁花呗联合支付宝与天猫,投入超过200人的团队,不断调高预估瞬时并发量。在双十一当天,蚂蚁花呗特别抽调了70多人的专项保障团队,涵盖产品、技术、运营等多个部门,严阵以待。

在蚂蚁小贷内部,蚂蚁花呗被定位为“无忧支付”,主要在用户付款遇到问题时可以挽回,还有“这月买、下月还”和分期付款功能。蚂蚁金服首席技术官程立透露,与支付宝合作的200多家银行提前5个月就开始支付容量评估与升级,并进行了93轮470次的压力测试,以确保整个系统能够稳定支撑双十一的支付洪峰。

为了避免对用户正常使用造成影响,今年双十一前的压力测试时间通常都会选择在夜晚、凌晨或节假日。中国邮政储蓄银行的行长亲临压测现场,支持大促保障的压测工作,最终邮储银行相比2014年双十一容量实现翻番。农行进行了7轮压力测试,每一轮的性能都能得到明显的提升,但农行的技术团队每次都说,“我们还要扩容优化,下次再测。”

今年双十一开场的第一分钟,蚂蚁花呗的成功支付笔数达到52万笔,支付成功率达到100%,每次支付只需要花0.035秒。“当时长出了一口气,现场一片欢呼,既紧张又亢奋。”在现场支持的运营人员蒋珂说。程立表示,由蚂蚁花呗的支付带动了支付成功率的提升至少有2%~3%,每个百分点至少能够促进1.3亿的消费。

历时5个月准备、多项创新并举

刘振飞介绍说,今年双十一的技术筹备从七月份就开始了,在近五个月的时间里差不多每周都会进行一次整个交易支付全链路压测,模拟双十一零点的状态。“今年双十一开场前30分钟交易系统和支付系统,基本上是贴着系统设计的最高能力去攀升,那30分钟对于我们来讲还是有点紧张。准备得再充分,你都不知道这一刻会发生什么黑天鹅事件。”

实际上,为了保障2015年双十一用户体验,阿里在过去一年多的时间里完成了多项技术创新。在无线交易端,手机淘宝搭建了一个世界级无线云平台。在服务亿级用户的同时,手机淘宝实现了一系列技术优化:内存节省50%、滑动提速20%、1秒打开手淘页面。双十一全场无线端还全面进行了个性化,消费者在手机屏幕上能轻松找到喜欢的商品。针对2G手机用户,手淘的工程师们建立了2G网络实验室,通过不断模拟测试,实现2G弱网环境下的手机也能1秒连接。

在信息安全方面,今年双十一期间阿里云安全团队通过数据模型实现了DDoS攻击检测。系统通过行为模型、恶意IP地址比对等技术手段,完成了对流量成分的分析,从而抵御大规模黑客攻击。而从去年开始,阿里就耗时一年完成了淘宝、天猫的全站HTTPS加密传输。电商平台从客户端到服务器之间全程加密,有效保护消费者和商家信息不被第三方劫持。刘振飞说,HTTPS的技术本身并不神秘,但是整个系统改造非常复杂,投入资源非常大。

点亮今年双十一水立方主会场的数据大屏,采用了阿里研发的dataV数据可视化引擎。该引擎完全基于Web 技术,可快速、低成本部署。当用于内部的商品、交易、支付等的可视化呈现时,能够帮助商家更直观地调控运营与管理。今年的水立方数据大屏上还利用了3D webGL技术,通过3D图像展示双十一平台总体交易订单实时流向。这一技术派生出来的3D城市,还能对城市里的人群进行微观画像分析。目前,这一技术已计划通过阿里云向外输出。

值得一提的还有今年双十一采用的“一键建站”技术:通过阿里自研的自动化软件,将中间件、数据库、商品交易系统、商品展示系统等上百个电商核心系统,像搭积木一样新建和部署淘宝和天猫的交易单元。这些交易单元与原有的系统一起“协同作战”,从而分散流量、减轻系统负担。以往重新部署一套交易单元,至少需要提前1个月的时间准备,而今年则只需要一键完成,所需时间不到90分钟。

经过6年的发展,阿里云在云计算基础设施领域,覆盖了从域名、备案、解析、计算、网络、存储、数据库、安全、海量数据分析到互联网中间件等多项服务。今后,阿里云还将加强在基础和前瞻技术领域的研发,包括芯片、存储、网络硬件、大规模计算集群和软硬件一体化等,提升核心技术竞争力。

阿里云总裁胡晓明说,阿里把每年双十一所积累的技术能力开放出去,这就是普惠科技。通过普惠科技,创新者、创业者也能拥有跟阿里一样的技术能力。据统计,在今年双十一当天,有超过3万家创新创业企业通过阿里云官网抢购计算资源,采购量相当于一座大型数据中心,较传统方式节省了上亿元的IT成本。其中,有近千家企业购买了阿里云海外的计算服务。(文/钛媒体记者吴宁川)

【更多精彩内容,尽在《云科技时代》微信,微信号:CloudTechTime】

时间: 2024-12-15 07:13:22

扛住了双十一6年430倍压力增长的阿里云凭什么?的相关文章

今年双十一,预测阿里会有哪些大变化?

说到双十一,以前大伙都喜欢称之为"光棍节",意为单身之意.如今这个节日却披上了互联网衣服,变成了国民购物狂欢节.阿里巴巴打造的"双十一大促盛典"截止现在已经第六个年头了,每年都会有新的记录诞生,不管是垂直类的,还是阿里自身平台的.但是,今年随着阿里在美股上市,涉足国际商场,即将到来的双十一大促势必会更加热闹.更加刺激.那么,今年双十一,阿里会有哪些变化呢? (1)稳固国内,涉足国外,打造全球双十一盛典 阿里巴巴从诞生以来,旗下淘宝前期以C2C.B2C野蛮生长,积累了

从IaaS到AI,马云为何让阿里云去扛人工智能大旗?

免费开通大数据服务:https://www.aliyun.com/product/odps 绝大多数人对阿里云的定位仍是国内市场最大的IaaS提供商.不过,随着国内人工智能市场在2016年迎来爆发,阿里开始在人工智能领域发力,阿里云的这一角色正在悄然转变. 布局AI领域,阿里云扛起阿里人工智能大旗 虽然阿里不是BAT三座山头中在人工智能领域的声势最旺的那个(百度躺枪),但事实上阿里从2015年也已经开始了人工智能领域的布局. 2015年6月,阿里巴巴联合富士康以145亿日元的价码战略投资软银旗下

2018阿里云双12年终大促主会场全攻略

摘要: 双12官方攻略出炉! 2018阿里云双12年终大促活动已经于12月7日正式开启,从已开放的活动页面来看,活动分为两个阶段: 12月7日-12月23日的拉新返现阶段和12月24日-12月28日的TOP100英雄榜PK阶段. 活动核心亮点:老会员拉新可享25%返现+最高2.5万奖金,拉新前100赢大奖!新会员购买云产品2折起! 在双12这个大促活动中,怎样才能花最少的钱配置最特惠的云服务?云栖社区特为各位开发者奉献出省钱大法如下: 丨活动阵地:https://m.aliyun.com/act

荣耀的双十一:为冠军而来

前些日子,第三方数据机构发布报告指出华为手机在出货量方面已经赶超小米,之后又有知名自媒体指出,荣耀仅2014年第一年的销量就达到2000万部,而2015年更是只用半年时间就达到2000万部销量.该自媒体指出,华为在2015年的销量将会铁定超越1亿部,而按照目前发展速度来看,未来荣耀或将实现单品牌赶超小米的速度. 这种磅礴而凶猛的发展势头,使得荣耀对双十一也信心满满. 10月30日,荣耀官方微博发布消息,内容和配图均以"为冠军而来"为口号,力图抢夺双十一手机销量冠军的意图可见一斑.除此之

“双十一”可以休矣!

"双十一"可以休矣! 作者:张国祥 2015年11月19日 吴晓波说,今年会是最后一个"双十一"了.用户成长成熟趋于理智:商家赔本赚吆喝:物流公共危机爆发:虚假交易记录等等都在蚕食"双十一".笔者完全赞同,认为"双十一"可以休矣! 笔者一向主张取消一切不产生价值的活动,对各种"炒作"更是嗤之以鼻.我实在看不出"双十一"对增加社会产出.增加厂家利润.甚至对买家有什么好处!"双十一

vue+webpack在“双十一”导购产品的技术实践

双十一中,无线前端的产品可以说非常的丰富.在双十一中,互动始终是重头的一部分,但是与以往不一样的地方是,导购产品在本次双十一中有着不俗的表现.而今年的双11导购业务占据了5大模块里的后三个,除了必抢,其它业务均是由手淘的同学来完成的,笔者作为导购产品的一员,选择导购产品来给大家解读其中的技术实践. 本次双十一的导购产品都有哪些? 看到这些截图,相信很多人都很熟悉,不管是双十一晚会摇一摇摇出的“清单”,还是大家抢完红包迫不及待点开的“我的双十一”,又或者是点开“我的双十一”标签进入的人群会场寻找与

隐忍多年,今年双十一,苏宁可以给自己一点掌声

双十一确实还是天猫的双十一,大部分的焦点都集中在10日晚天猫的晚会和11日的GMV增长上,但其中比较有意思的是苏宁易购在天猫双十一中狠狠的刷了一次存在感,成为2016年天猫双十一的单店销售冠军,苏宁订单量增193%,对于今年双十一的表现,苏宁可以给自己一点掌声. 苏宁成为天猫双十一销售额冠军并不是靠关系,而是传统品牌价值回归 11日0点一过,天猫销售额瞬间飙升,而苏宁第一时间就脱颖而出,最终成为天猫单店销售额冠军.很多人可能会认为阿里与苏宁有密切的股权关系,所以天猫自然会照顾一下苏宁易购,这种情

双十一,一场空虚的高潮

文|刘宇凡 2015年11月12日|深圳晚 前言: 随着钟声的响起,2015天猫双11全球狂欢节全天交易额达到了912.17亿元!无线成交626.42亿元!无线占比68.67%!--这是消费的力量,是新经济的力量,是我们每一个人的力量,更是中国的力量!(声明:天猫说的,不是俺说的!) 双十一终于结束了,俺终于忍不住要说上那么几句了! 这个双十一是2009年开始的,本来俺是不晓得什么是光棍节的,但自从阿里巴巴整出这么个东西来之后,光棍节就成了全民娱乐的节日了,并且他妈的还要宣扬此日为"消费狂欢节&

程序员的双十一

又到双十一了,这已经是我到京东后第五个双十一了,如今双十一已经发展成了一个全民的购物狂欢节. 2011 年,是我在京东经历的第一个双十一.那时京东刚刚拓展了图书品类,就搞了一个三小时内下单图书满两百减一百的活动.也正是这个活动刺激了广大爱学习.爱读书的同学疯狂下单,最后订单系统瘫痪了.正是这次瘫痪引发了后面老刘插刀请技术部负责人喝茶的轶事. 那时作为一名正在快速成长的程序员,我自然也买了很多书,为这次系统瘫痪贡献了一份力量:).今天整理办公桌抽屉,发现一本隐藏在最里面角落的旧书,正是在那次活动上