中国数据存储服务平台

为了让你用上海量存储,希捷开源了一套对象存储——CORTX

朱 朋博

2020年9月25日凌晨,希捷开源了一个叫做CORTX的对象存储软件项目,CORTX项目100%开源,兼容标准的S3接口,目前已经可以在github上获取到源码,同时,还提供了预配置的虚拟机镜像直接安装快速体验,如果有什么问题,也可以在新建立的CORTX开源开发者社区里进行交流。

CORTX是希捷完全从头开始设计和实现的对象存储方案,它直接将数据存到块设备中,而不经过本地文件系统层,它还有许多高级特性,比如使用流式b-trees来访问系统和用户元数据等小块数据,以此提升性能。

CORTX作为面向非结构化数据存储的大容量分布式对象存储方案,其扩展性是重点,单一namespace下可以从几PB起步扩展到EB级别。

与此同时,为了方便在生产环境用起来,CORTX还发布了参考架构Lyve Drive Rack(LDR)方案,LDR是一个融合系统,它采用AA高可用架构设计,数据保护方面还支持ADATA技术,单节点支持放置84或者106块磁盘,支持16、18TB CMR磁盘,容量大约1.3PB起步。

LDR目前在磁盘柜级别提供了数据持久性,如上图所示,这种等级制(Hierarchical)的擦除编码技术能加快磁盘的故障恢复速度,特别是在用大容量磁盘时候更有效。

想要自行搭建CORTX系统的用户最好使用有高可靠设计的存储硬件,因为,CORTX软件中的擦除编码技术目前还是预览状态,想要使用该技术的话还得等等。

对希捷来说,CORTX可以更好地利用大容量磁盘,CORTX开源方案中加入了希捷对于大容量硬盘做的许多独有优化,官方的优化能发挥硬盘本身的特性和优势。

从战略上来讲,对于希捷的主营业务有直接利好,希捷也宣布将于12月发布20TB HAMR磁盘,预计在2026年,能把HAMR盘做到50TB。从目前资料来看,希捷表示目前主要支持CMR,以及新的HAMR盘,没有提及SMR,不过,后续可能会基于CORTX对SMR做一些优化。

基于大容量磁盘的CORTX可以提供超高的存储密度,减少地板资源占用,节省宝贵的机房空间,所以,对最终用户来说,CORTX可以实实在在帮助用户降低成本,至少软件是免费的。还有希捷硬盘原厂技术服务撑腰,可能会比别的开源方案用的更放心一些。

市场需要这样一个新的对象存储方案吗?

由于CORTX是100%开源的,所以,天生就比较容易被接受。CORTX由希捷来开源的好处是,可以快速构建生态,在CORTX社区里,汇集了大量最终用户、OEM以及许多开发者。

英特尔表示可以基于傲腾持久内存、QAT技术、以及DAOS文件系统与之合作。著名HPC并行文件系统厂商WekaIO肯定了CORTX对于在存储的高性能和存储的经济方面的价值。

而且,CORTX是一款不依赖特定硬件架构的开源对象存储软件,只要是支持标准块存储接口的设备都可以用,言外之意是别的品牌的磁盘也能用。对用户来说,没有厂商锁定的风险,对于合作伙伴来说,参考解决方案的打造可以丰富其产品类型。

CORTX是一个非结构化数据存储方案,其应用场景包括人工智能、机器学习、混合云、边缘计算、高性能计算等。目前,已有多家科研机构测试或者实际使用了CORTX,包括法国替代能源和原子能机构、英国原子能管理局、洛斯阿拉莫斯国家实验室。

还有硬件合作伙伴正在测试软硬一体的打包解决方案。首批参考架构将于2020年Q4正式对外可用,商用版本的一体机方案可以从合作伙伴处获取,从而为LDR提供企业级支持。

希捷为什么要开源这样一个项目呢?

如今互联网技术发展越来越多地影响着企业IT,希捷的CORTX主要面向的是企业级用户,CORTX开源的、没有厂商绑定的思路与超大规模数据中心的做法如出一辙,让企业也享受到互联网公司技术的优势,比如互联网公司能比企业更快用上大容量磁盘。

希捷分析后给出了一个有趣的数字,现在的企业级存储比较贵,用户在企业级存储上投入的资金中只有25%是花在磁盘本身的,换言之,就是用户付出的额外成本太高了,降低成本的方式有很多,比如开源一个CORTX。

其实,在几年前,西数也有过类似的解决方案,它的意义在于提升产品方案的附加值,不只是售卖磁盘而已。相比之下,希捷的此次做法就高明很多,开源方案更容易让人接受,开源的CORTX避免了与合作伙伴的直接竞争。

希捷与对象存储其实颇有渊源。

1999年,希捷提交了“基于对象的存储设备命令集建议”的初步版本,包括卡内基梅隆大学、IBM、Quantum和StorageTek对该建议都有贡献,这份建议中将对象定义为一种抽象数据,它具有唯一的标识符和元数据,定义了对象如何与文件系统的关系,以及许多其他创新概念。

希捷也从来不满足于只做硬盘。值得一提的是,LYVE Drive是希捷一大类存储产品的品牌,LYVE Drive Mobile从SD卡、到读卡器、到硬盘盒、存储阵列都有,侧重于移动性,能让数据从边缘传到数据中心,LYVE Drive Shuttle则算一个独立的系统,有计算存储和网络能力,而LYVE Drive Rack作为新的存储系统参考架构,进一步丰富了该产品线。

今天,整点煽情的……

张 妮娜

“教师节快乐!”

是每年9月10日雷打不动的祝福

感谢学校里

引领我们走向知识殿堂的老师

也感谢人生道路上

为我们指点迷津的恩师

师恩不忘,此意绵长

在这里重返课堂
切磋交流,学无止境
与数字化列车一起奔跑🚄

#活动角#

由百易传媒(DOIT)主办的2020中国数据与存储峰会(DSS)将于11月18-19日在北京举行。本次大会以“新数智,新未来”为主题,12大研讨方向覆盖数据智能上中下游,院士专家及一众行业代表同台诠释存储发展方向,为广大行业人士奉献一场精彩绝伦的数字化盛宴。点击这里,了解更多活动信息

腾讯副总裁丁珂:新基建加速中国上云速度,云安全已成为安全主战场

张 妮娜

2020年9月9日-11日,一年一度的腾讯全球数字生态大会正式举行。众多嘉宾围绕“未来经济,数字优先”的主题,针对产业互联网的深化发展及数字经济对社会发展的助推作用展开探讨。作为产业互联网的重要基础,产业安全也成为大会特别关注的重点方向。

在大会首日的“未来经济峰会”上,腾讯副总裁丁珂以“产业上云,安全先行”为题展开演讲。他指出,如果把新基建比作“路”,把产业互联网比作“智慧汽车”,那么安全应该是这辆汽车的底盘,是保障“智慧汽车”安全、平稳行驶的前提。随着新基建与云基础设施建设的深入,安全焦点已经发生转移,云安全已经成为安全的主战场。上云是应对数字时代安全问题的“最优解”。

image.png

腾讯高级执行副总裁、云与智慧产业事业群总裁汤道生也指出,安全是产业数字化的“底座”,每个单位都需要建立一套适用于数字时代的安全体系,以数据为保护对象,把安全措施带到数据流通的每个环节。

腾讯安全作为产业安全的领导者,既赋予了内部产品原生的安全能力,也助力产业在数字化抗疫中拥有“腾讯级”的安全防护能力。疫情期间,腾讯在医疗、教育、在线会议等方向的业务发展迅猛,腾讯安全依托于二十多年的技术、人才团队积累,确保业务安全。在两会期间,腾讯安全团队为腾讯云助力两会的应用,围绕超大流量的DDoS攻击、针对应用层漏洞的网络入侵以及服务器层面的攻击,搭建全方位的安全防护体系。并通过接入腾讯安全运营中心,实时监测各个攻击面的安全状况。在广交会上,腾讯安全作为重保团队,在展会开幕前两个月就投入到安全建设中,进行了大量的风险评估、漏洞测试与攻防演练等工作,展会期间24小时不间断值守,最终确保了0安全风险、0安全事故。此外,腾讯安全还广泛服务于18大行业的12000余家客户。

image.png

丁珂表示,在消费互联网时代,腾讯将以守护10亿级用户安全为己任;在产业互联网迅猛发展之际,腾讯安全将继续携手产业链生态伙伴,开放腾讯级安全能力,推动实现安全普惠。

以下为腾讯副总裁丁珂演讲全文:

尊敬的各位嘉宾、媒体朋友们,大家上午好。

刚刚汤总和大家分享了“未来经济,数字优先”的洞察,我想沿着这个思路,和大家一起来探讨下新基建和安全的话题。

新基建的部署落实,将进一步放大5G、AI、云计算等关键技术在产业互联网发展中的价值,为数字经济发展注入新动能。而新技术的应用、新业态的发展,必将带来更多新的安全挑战。产业互联网发展,安全是必要前提。

如果把新基建比作“路”,把产业互联网比作“智慧汽车”,那么安全应该是这辆汽车的底盘,是保障“智慧汽车”安全、稳健行驶的前提。

作为产业安全的领导者,腾讯在保障自身业务发展的同时,正积极联合产业链生态伙伴,致力于夯实“产业互联网安全底座”,开放自身的技术和能力积累,为数字经济发展保驾护航。

今年突如其来的疫情,就是对“产业互联网底盘”稳定性的最好检验。腾讯躬身入局,助力全社会战疫,腾讯自身的业务经受了巨大考验,这里可以和大家分享两个案例。

第一个,是腾讯会议。

受疫情在线办公影响,从今年2月份开始,腾讯会议用户量暴增,上线两个月日活就突破了千万,成了一款“国民级会议软件”,还衍生出云毕业、云签约、云授课、云发布会等等很多“新姿势”,对用户数据安全、内容安全和应用安全等都提出了极大考验。为此,我们组建了一支重保团队,实现数据、网络、管理、接入策略的多重安全防护,守住了用户安全底线。

第二个,是小程序安全。

在疫情期间,小程序成为线上“战疫”的必备工具。政务、医疗、社区管理等公共服务类小程序包含大量的重要数据,对稳定性和安全性要求极高。我们推出了一套小程序“微应急”安全防护方案,客户可通过云端直接部署,保障小程序从上线到运营全生命周期安全。现在这套方案已经应用在200多个城市公共服务当中。

在疫情的极限情况下,我们的应对还不错,顶住了压力,解决了大量突发问题。现在回头来看,在疫情期间我们走出了新的规范,树立了新安全样板。

我们牵头制定了零信任安全、物联网安全、安全风控等多个国际标准,云安全产品相继被Gartner、Forrester、IDC、Sullivan等国际权威安全报告推荐,收获了“大满贯”。腾讯的云安全技术专利申请量有1500多件,位列行业第一,超过第二名50%还多。不仅在国内,哪怕在国际上,我们在面对新安全问题方面,都是探索者和先行者。

当前,我们正处于安全产业的一个重要转折点。随着新基建及云基础设施的不断深入,当前安全的焦点已经发生转移,云安全已经成为安全的主战场。

一方面,云计算的市场规模正在快速扩容。据通信院的数据显示,2019年我国云计算市场规模达1334亿元,而到2022年,市场规模预期将达到2900亿元。另一方面,云安全问题愈发重要。腾讯安全的情报数据显示,云资源作为攻击源的比例已占国内所有攻击源的45.55%,约2/3的网络DDoS攻击事件都以云平台IP作为攻击目标;一旦发生安全事件,将给企业带来致命性损失。

与此同时,我们不得不认清一个事实,我们安全产业的完备程度,相比数字化的发展速度,还存在比较大的差距,主要体现在三个方面:

首先是应用门槛太高。比如一些大型企业安全采购招标,往往在已经设计好的IT架构上,补充安全模块,还要实现全部兼容。其次是成本问题。第三个是数字化发展的速度太快,企业要做到实时迭代更新、适配非常困难。

要系统的解决目前安全思维和部署上的差距,有几个关键的路径。

一个是“安全左移”。思维上的左移,要从企业的宏观视角,把安全当做企业的CEO一把手工程来关注。流程上的左移,要在生产流程中把安全前置。

第二,是要“减少攻击面”,通过AI和大数据来提前发现和处置异常,降低高风险环节的权限,降低风险概率。对于重要的数据资产,主动的控制暴露的时间窗口,控制资产暴露的空间位置,就能够有效的规避风险。

第三,要加强“供应链安全”。大型企业或者政府对于自身安全的重视程度都很高,攻击者就开始通过供应链第三方潜入系统发动攻击。要将产业链相关方置于同样的安全框架、标准和监管之下,或者纳入到同一个防御体系中。

但是,要做到以上三个方面,对于一家企业来说,难度太大了。对于多数客户来说,采购安全设备、投入研发、招聘专家的成本负担很高,从零开始自建防御体系也不现实,怎么办呢?我认为,上云是应对数字时代安全问题的“最优解”。

腾讯在安全上已经耕耘了二十多年,建立了多个安全实验室和工作组,有超过3500人的专业安全团队,在安全技术研究和安全攻防方面的实力全球领先。依托云原生安全思路,我们构建了云适配的原生安全产品架构,既可以有效的保障腾讯云平台自身安全,也能让云上企业有效降低安全运营门槛、提升整体的安全水位。这一部分内容,在CSS安全峰会上,我的同事会为大家做更加详细的分享。

在产业安全领域,腾讯安全已经为18大行业,12000多家客户提供了安全服务;服务300余家政务单位,为超过1000项移动政务服务提供安全保障。在两会、广交会等大型峰会期间,腾讯提供了完备的安全保障服务。

产业上云千万步,安全先行第一步。在消费互联网过去发展中,腾讯安全践行责任,以守护10亿级用户安全为己任;在当前产业互联网迅猛发展之际,腾讯安全有责任再扛大旗,携手产业链生态伙伴,开放腾讯级安全能力,推动安全普惠的实现。

“小程序经济圈”:2019年小程序交易额超8000亿;2020年日化行业GMV已增长17倍

张 妮娜

9月9日,“微信·发现新增长”微信专场拉开了腾讯全球数字生态大会的序幕,小程序、微信支付、企业微信、搜一搜、微信AI共同亮相,带来小程序的数字化工具升级及生态开放、“支付即服务”的多场景应用、“企业微信中小企业智慧增长解决方案”,搜一搜“服务搜索”等新信息,为各行各业的复苏和未来增长提供了新的思路。

覆盖超200个细分行业,“小程序经济圈”初步显现

历经三年多时间的持续共建,”小程序经济圈”已经初具规模。2020年,小程序的日活跃用户超过4亿,覆盖超过200个细分行业,小程序超过百万级体量,“小程序从业者”536万。与此同时,微信生态里活跃的第三方服务商也已超过4万家。

早在2019年,小程序的交易额就已突破8000亿。2020年1-8月,小程序实物商品GMV同比增长115%,品牌商家自营GMV同比增长210%,增长最快的行业是日化、奢侈品、购物中心和百货,日化行业的增长高达1710%。

“小程序经济圈”以微信小程序为核心纽带,连结微信生态能力深度助力各行业与产业,进而产生巨大社会经济价值的经济形态。

区别于区域型城市经济圈,随着互联网引领的新经济的发展,那些依托特定优势的互联网工具与平台的经济形态,正在形成各种“新经济圈”。而相比而言,小程序经济圈是典型的生态型经济圈,是快速生长、活力十足的一个。

小程序经济圈以微信小程序为核心纽带,连结微信支付、企业微信、微信搜一搜、微信AI等微信生态能力,组成的全景生态矩阵,打造数字化超级解决方案,深度助力各行业与产业,成为国家互联网经济中后发且增长强劲的一块新版图。

持续释放新能力,以小程序为纽带促进生态内外协同

2020年以来,小程序完成了从社交到数字经济产品的全面升级。今年,小程序先后推出小程序直播组件、小程序订单管理、交易保障、微信小商店等功能。

小程序直播2月启动公测,目前,已有近10万商家开通了小程序直播。因更适合私域直播,小程序为直播行业拓展了新的蓝海市场。

微信小商店全量上线以来,累计开放类目也迅速超过2000个。小商店可以免开发快速帮助商家生成在线商店的产品,极大的降低了广大不具备开发能力的商家进入到小程序生态进行线上数字化经营的门槛。部分商家在开通30天内订单突破1000,获得了可观的营收。

此前,腾讯已经为企业攻克数字化堡垒提供了七种武器,分别是公众号,小程序,移动支付,社交广告,企业微信,大数据、云计算、人工智能,以及安全能力。借助七种武器,腾讯为政府和企业提供了最有效的数字接口和最完备的数字工具箱,成为后者最好的数字化助手。

如今,基于小程序的核心作用,腾讯的“七种武器”紧密连结、互相配合。同时,微信社群作为基础武器、微信搜一搜作为新武器,也分别融入。特别是微信支付、企业微信与小程序的联动,在高度互通的基础上,完成了用户的触达、留存、转化,构建数字化经营闭环;微信搜一搜、AI与小程序则通过搜索、微信AI语音能力,连接服务、用户和生态。由此,小程序经济圈的能力支撑越发完善。

打造数字化超级解决方案,深度助力行业与产业

小程序经济圈的生态能力相互融合,提供了一套组合多样、层次丰富、适用广泛的数字化解决方案,满足不同行业的个性化需求。

首先,结合微信支付、搜一搜、微信AI,“小程序经济圈”实现了公域和私域的能力互动。

通过微信支付“支付即服务”、商家券等能力,实现了公域到私域的运营转化。在企业数字化能力搭建的过程中,微信小程序扮演了一个私域运营的载体,通过线上线下渠道的融合,不断持续转化会员,沉淀私域用户和数字化资产。

服饰品牌绫致通过“支付即服务”能力实现了跟导购、小程序、用户端的强关联、强绑定,并基于这种连接,绫致在2月份的一场直播实现了近3亿的GMV。麦当劳接入商家券小程序,在7月份实现了日均核销100万张;百果园也利用微信小程序达成商家券的营销跟分发,通过小程序和公众号每天分发约150万张商家券。

微信搜一搜的核心目标是让真正优质的内容能够通过搜索高效地触达用户。在小程序内容接入方面,马蜂窝的小程序深度参与了搜一搜在旅游类目的内容建设。目前,在马蜂窝小程序的整体流量中,来自搜一搜的流量占比在50%以上。

连接内容与用户也是微信AI的重要方向。此次大会,微信AI分别跟惠普和英特尔合作了惠普星系列以及惠普的13寸变形本,腾讯小微以整机语音助手的形态嵌入到这两个产品体系中,并完成了跟腾讯生态以及微信生态内容服务的连接。

其次,小程序经济圈打通线上线下的一体化进程正在加速。2020《码上经济影响力报告》显示,小程序已经成为零售门店新线上入口,会员拉新规模提升6倍。在充分将企业微信引入日常导购的购物百货中心行业,2020年上半年,行业小程序整体GMV同比增长670%。

2018年,天虹正式推广小程序,将天虹App上的核心功能上线至小程序。之后逐步开发上线适合微信生态的拼团、福利、专柜到家、直播间等能力。2020年7月27日,天虹小程序会员突破1000万。小程序的持续深度运营,成为百果园直播带货的基础保障,目前百果园小程序会员突破2800万。

2017年10月,茵曼就上线了品牌的小程序。通过公众号推文、门店社群,导购体系+朋友圈,甚至一对一精准会员运营,茵曼希望基于微信生态构建顾客的触点闭环。

最后,小程序经济圈助力企业从“流量”走向“留量”。大商天狗使用微信支付的小程序收银能力,减少了“飞单”和“体外循环”,小程序收银的日均GMV超1100万,实现更好的用户留存。与此同时,疫情后,大商集团把自己的核心策略变成了“每店每天一直播”,每天的直播可达 100-200 场。今年7月,大商“全民直播”的销售额突破了7000 万。

实现从“流量”到“留量”的转变,如今更多企业通过企业微信将导购升级为“超级导购”,并让每个超级导购成为对外服务的“超级入口”。今年3月到5月,乐凯撒通过企业微信积累了30万客户,复购率从19.1%提升到了29.4%,客单价从98.9元提高到了104.3元。

存储设备研发商嘉合劲威获数千万美元战略投资

张 妮娜

9月1日消息,存储设备研发商嘉合劲威获得战略投资数千万美元,投资方为厦门半导体、深圳中航坪山。

据了解,嘉合劲威,拥有业界一流的研发团队和数条全自动化高速SMT生产线。提供全系列的内存模组、SSD固态硬盘、各类存储装置等优质产品及解决方案;同时,产品广泛应用于移动终端、个人电脑、通信设备、工业控制计算机系统、企业级服务器、数据中心、云存储等等;还提供客户特殊订制服务以满足市场差异化及创新型的需求。公司在深圳、台湾两地设立工厂及研发中心,设立料件检测、兼容性测试、可靠性测试、芯片调试实验等多个实验室,占地逾八千平方米。据不完全统计,嘉合劲威所属领域智能硬件本年度共有57笔融资。

本轮投资方厦门半导体是一家专注于半导体行业,以投资、并购和资本运营为主要业务,并坚持按市场机制独立运营的半导体产业投资公司。厦门半导体集团将集成电路产业作为主导产业进行谋划,以投资、并购、资本运营和基金管理为手段,打造按市场规律运营的产业资源整合平台,涵盖集成电路设计、产品导向的特色工艺、集成电路封装测试及集成电路装备与材料等领域的重点产品、核心技术和重点应用项目(企业)等。厦门半导体近期还投资过慧能泰、楚航科技等企业。

DRAM资本支出暴降

张 妮娜

ICinsights报道,尽管DRAM市场有望在2020年出现温和复苏,但是供应商在考虑任何进一步升级或决定推进任何新DRAM晶圆厂计划之前,对市场状况的分析非常谨慎。

图1显示了三个主要供应商的DRAM资本支出预算。由于大多数新设施和对现有晶圆厂的升级都已准备就绪,可以满足近期需求,因此两家公司都有望在2020年进一步削减其DRAM资本支出。在三大DRAM厂商中,IC Insights预测三星今年的DRAM资本支出预算将下降21%至49亿美元,SK Hynix有望将其DRAM资本支出预算削减38%至40亿美元,而美光则有望削减其16%的DRAM资本支出,降到36亿美元。

考虑到建造和装备所需的大量资本支出,一旦建成,新的晶圆厂必须以非常高的产能或满负荷运转。仅投资60亿至100亿美元就只能看到部分产能,这将对任何供应商造成破坏性的财务影响。因此,DRAM制造商将在接下来的几个月中继续密切监视容量和扩展计划,以限制另一种供需不平衡带来的潜在损害。

三星,SK Hynix和美光将在2020年结束其DRAM产能扩张,并且双方都明确表示,他们将受限于建造和升级新生产线的进展速度。像Winbond这样的小众DRAM供应商也受到了保护。华邦正在台湾南部高雄兴建新厂。该设备原定于2020年底完工,计划于2021年投入商业生产。但是,该公司现在已将设备的搬入计划延迟到2022年1月进行。

总体而言,预计供应商今年将为DRAM资本支出支出151亿美元,较2019年的191亿美元下降20%,较2018年的DRAM支出232亿美元的历史新高有所下降。即使过去几年资本支出水平上升,但DRAM资本支出占DRAM销售的百分比也也与行业自2015年以来的情况完全不同。但是,值得注意的是,随着占集成电路37%的DRAM市场在2019年崩溃,DRAM资本支出占销售额的百分比跃升至30.5%,是2011年30.5%以来的最高水平。

在线研讨会 :Pure Storage 以全闪存技术优化VDI的用户体验

张 妮娜

8月27日(周四)14:00,Pure Storage将于线上举办研讨会,探讨远程办公场景下,以全闪存技术优化VDI用户体验的挑战和应用。

全闪存方案 提升远程办公用户体验的利器

面对持续数月的新冠肺炎疫情,全球很多企业都开启了远程办公模式。其中,为数不少的企业采用了VDI(虚拟桌面架构),希望能更好地支持员工实现远程办公。
然而,有一些虚拟化技术导致的麻烦,甚至比它能够解决的问题还要多:最终用户性能欠佳、管理复杂、成本高昂,以及后期难以因需扩展。 据我们了解,VDI 实施的成效之所以不尽人意,很大程度上是因为存储系统的不足。

将VDI推向下一阶段的最重要因素,还是可靠的、基于闪存的存储方案。

Pure全闪存阵列能为客户提供快速、统一的VDI体验,不仅能让最终用户赞不绝口,也让VDI管理员对于其部署和管理的便捷性感到满意。

线上研讨会看点全揭晓

在本次主题为《以全闪存技术优化VDI的用户体验》线上研讨会中,我们将与您探讨VDI部署所面临的技术挑战,以及Pure Storage如何以全闪存技术助力用户弥补这些短板,交付超乎企业和最终用户期望值的VDI使用体验。Pure Storage两位具有丰富VDI规划及部署经验的资深架构师将与您实时交流,并分享用户成功案例。

汪建光先生于2015年加入Pure Storage, 目前担任亚太及日本区FlashStack 解决方案架构师。 汪先生已有超过12年的IT行业从业经验,主要从事面向用户的系统工程师和解决方案架构师工作,是用户所信赖的专家,帮助用户应对他们的业务挑战,并把Pure Storage现代数据体验的愿景在用户那里付诸实现。

欧全镒先生于2019年加入Pure Storage,目前担任大中华区首席架构师。 

欧先生拥有20年的存储行业经验,多次参与大型用户之存储设备新技术更新,同时也协助用户数据中心构建存储虚拟化与零停机之双活双中心等关键业务架构。在20年服务用户围绕存储需求的规划与实施中,欧先生也积累了丰富的行业经验,尤其是在制造、金融、教育、医疗等领域都有深刻的洞察力。

扫描上方二维码直接报名!

点击详情,了解更多

Kubernetes 容灾解决方案的关键能力

张 妮娜

我们面临着不断地需要实施和部署新的软件应用、发展新的商业模式、以及吸引新的客户。通过Kubernetes,我们可以采用云原生方式来进行软件的开发、部署和运维。

基于Kubernetes开发和运行的应用,对于我们实现我们的商业目标,非常重要。但新技术的导入,也会要求我们考虑更多:新的开发方法、新的团队、新的工程师、新的技术、新的合作伙伴、新的供应商、新的挑战。

对CIO们来说,将关键应用转移到Kubernetes上的最大挑战之一,就是容灾恢复能力。

在投入大量资金开发了Kubernetes上的应用后,我们最担心的就是:一旦出现我们无法控制的意外事件,我们的应用变得无法访问。如:云供应商服务意外停止、数据中心电力中断、云服务中断、网络连接中断等。导致用户无法访问应用后,用户满意度大幅下降。

根据著名研究机构Uptime Institute的报告,通常发生服务中断,一般我们会归因到第三方服务上,如托管服务供应商或云服务供应商。31%的服务中断是由由我们无法控制的因素导致的,如:网络错误(30%),IT/软件错误(28%)。对于Kubernetes上的应用,我们需要一个可靠的容灾恢复方案。

根据451 Research的报告,对于关键性应用来说,57%的应用要求RPO<1小时,48%要求RTO<1小时。即使是非关键应用,也有容灾恢复的需求。这对已经满负荷工作的IT团队来说都是较大的压力。

在这样的情况下,企业的IT团队,需要为诸多企业级应用交付强健的容灾恢复方案。

要点小结

Portworx解决了云原生Kubernetes应用企业级容灾的三个关键难点。

基于Kubernetes底层原生开发的PX-DR:

  • 以Kubernetes原生方式进行保护和恢复:容器颗粒度的保护、命名空间可感知。
  • 可应用感知的整体企业级解决方案、而不是多种方法的应用复合。
  • 操作简单,可实现零数据损失的跨云自动化快速恢复。

Kubernetes容灾解决方案,不仅需要操作简单方便,而且需要对容器化应用的技术细节进行有效感知。因此,一个为Kubernetes原生构建的、简单、易用、方便的容灾恢复方案变得更加重要。

Kubernetes应用保护的主要难点

容器的基本结构原理与虚拟机有着根本的不同

容器化应用与虚拟机中的应用有很大不同。为了有效的保护和恢复容器化应用,我们需要在分布式系统中编排执行一系列复杂的操作。这是因为应用是同时运行在多个容器里的,并且这些容器存在于Kubernetes集群里的不同的节点之上。

相对于在过去15年里我们常见的基于虚拟机的单体应用来说,这是架构上的很大不同。

传统的备份和恢复方案对于虚拟机的应用来说已足够。但是对于Kubernetes和容器来说,就不再适合。使用传统的基于VM的备份方案,不仅会让你失去对系统安全的控制,甚至会在关键时候导致应用不可用或者数据丢失,这是存在较大风险的。

容器应用需要智能化的自动恢复

在出现灾难事件后,恢复一个Kubernetes应用,并不是仅在另一个区域重新启动一个新容器那么简单。简单的快照无法有效确保数据的一致性。

容器应用的组件都是单独部署和单独扩展的,每个容器都有自己的容器镜像、部署配置、状态规则、外部配置、运维周期、依赖关系和数据。配置数据和应用的商业逻辑通常是作为元数据进行存储,保存在Kubernetes集群上,并且需要被保护和恢复,以确保应用能够正常的工作。

今天的容器化应用不再仅仅是一个只包括容器镜像和数据的单体。处于微服务架构下的应用,包括前端服务和中间件层。中间件层包括大量的正在运行商业逻辑的中间件,并且它们都连接到了持久数据服务上。这个完整的堆栈都需要被作为一个整体来进行备份和恢复。

一些流行的数据服务,如Kafka、Cassandra、Elastic、MySQL、MongoDB,是由不同的社区来创建的,每一个的运维管理和要求的技能都很不一样。

分布式数据服务的广泛采用,要求我们重新思考我们的数据保护机制,需要同时考虑数据、以及运维中的元数据。

零数据损失情况下的跨云快速恢复

备份和数据保护是非常重要的。在零数据损失的情况下,及时的恢复应用是容灾恢复最重要的目标。

超过53%的组织认为,对于关键应用来说,RTO(恢复时间目标)应该小于1个小时,但实际上,超过50%的应用需要1~4小时来恢复。因此为了达到理想的可用性目标,我们还有一定的差距。

对于商业组织来说,拥有有效的应用保护和恢复能力,正在变得越来越重要。超过65%的大型组织,已经实施部署了混合云/多云的策略。而其中的31%,正在同时使用超过2个以上的公有云服务。企业不可能从每一个单独的基础设施服务商,或者云服务商那里分别采购它们自行定制的解决方案。

Portworx为Kubernetes提供数据保护

Portworx是基于Kubernetes和容器的原生方式构建的。我们创建了一系列的存储和数据管理解决方案,专门来解决企业在现代化IT架构中面临的挑战。

Portworx PX-DR产品的定位,是为了保护Kubernetes应用,以达到零数据损失的快速恢复,并且赋能团队可以快速的掌握使用,不需要过多深入到每一个容器化应用的技术细节。

为Kubernetes原生设计

容器化应用通常跨多个主机,运行在多个容器里。通过Pods和命名空间来运行。Portworx PX-DR按照原生Pods和命名空间构建的方式来运行,从而让我们可以在容器颗粒度和命名空间层面上来对应用进行保护。

通过保护Pod和整个命名空间,不论应用如何配置或者应用如何在集群上跨主机来运行,我们都可以容易的选择应用并进行保护。

虽然应用是复杂的,我们采用快照操作,就可以对应用进行保护。Portworx的数据保护解决方案,让我们可以在另一个Kubernetes集群上快速的恢复和重启应用,不论集群是位于什么样/什么位置的云服务之上。

通过保护应用、应用的配置、以及应用的数据,Portworx提供了真正的Kubernetes原生容灾恢复解决方案。

应用可感知

今天的容器化应用变的越来越复杂:展现技术、消息流、分析、数据存储,每种技术都由不同的社区来构建,并且需要不同的运维方法。

为了达到应用的扩展性和数据保护,我们要么严格限制我们所采用的技术的来源数量,这会降低我们的灵活性。或者我们采用有效的解决方案来原生化的处理各种复杂性问题,从而更快的推动数字化。

这意味着我们可以持续性的创新和部署新的应用,而不需要对每一个技术都有深入的了解。Portworx会帮助我们完成底层的集成。我们只需要制定我们的应用保护时间计划,来满足可用性需要。

跨多云/混合云环境下的一致性的、可靠的容灾恢复 

我们的应用并不是处于单一控制的环境中。即便我们仅仅使用单一的云服务提供商,我们也会跨区域来部署应用。当我们使用混合云/多云环境时,复杂度就进一步提升。

Portworx PX-DR是按Kubernetes原生的分布式方式构建的。能够交付零数据损失(零RPO)和快速恢复时间(低RTO)是保持系统稳健的重要能力。

当应用被部署在彼此高速连接的云平台上时,例如,由专线连接的不同区域的云服务,Portworx可以帮助我们达到零RPO和零RTO。这意味着不会有数据损失,并且在发生问题时,可以即时恢复。

如果应用部署采用传统配置方式,如跨不同地理位置的数据中心的部署,通过Portworx,我们可以在几秒至几分钟的时间内恢复应用,并且不会有数据损失。

大多数企业的数据保护目标是1小时内恢复应用11,使用Portworx PX-DR数据保护,可以让我们达到更加快速的恢复。

如果当我们正在使用的某个云服务发生错误后,而我们的应用依然在运行,我们的客户满意度会更高。

加拿大皇家银行RBC的成功案例

加拿大皇家银行RBC正在通过Red Hat OpenShift使用Kubernetes,但是无法达到可用性的要求。通过Portworx企业级数据管理平台和PX-DR,RBC达到了零RPO、以及小于2分钟的RPO指标。这意味着RBC可以在2分钟内在另一个数据中心恢复应用,而没有数据损失。

结论

我们的商业环境在快速演进,我们的竞争对手在快速追赶。在互联网时代,客户的体验是成功的关键,我们无法允许让客户不快的事情的发生。

错误时常会出现,服务中断时常会发生,云服务时常会宕机。我们需要一个强健、灵活和快速的恢复解决方案,来保证我们的应用能够持续性的满足客户的需要。

我们在Kubernetes上部署的容器化应用是我们的增长引擎,但是容器化应用与传统应用有很大的不同。需要有针对性的通过Kubernetes和容器的方式来对应用进行保护。而不是传统的数据保护方式。

为了让DevOps能够充分的发挥效能,如果每一个技术都需要专业的工程师来应对,会极大的增加我们的投入。我们的容灾恢复方案需要与这些技术事先集成,可感知应用,这样通用型的运维工程师就可以很好的处理问题。

混合云/多云架构变得普遍,我们不能允许云服务提供商的任何错误对我们的应用造成影响。不论我们选择什么样的基础架构服务商,都应确保我们应用的可用性。

下一步

Portworx已服务全球2000强企业超过5年。我们理解您的目标、您的难点。我们愿竭诚帮助您。

这里是PX-DR的介绍视频,欢迎观看。

富士康计划拆分供应链

张 妮娜

富士康公布了截至6月份的Q2净利润, 共计229亿台币,约7.78亿美元,比去年同期增长34%,好于预期的179.5亿台币,富士康将业绩部分归功于服务器、iPad和Mac的强劲需求,同时表示在国际贸易紧张局势下,正在重新调整其制造业务。

(图片引自milwaukeeindependent.com)

富士康是苹果公司和其他科技巨头的关键供应商,每年在全球销售的iPhone及包括iPad在内的其他消费类设备中,产品占比相当大,在科技行业的供应链中扮演着核心角色。其大部分制造业务都在中国。近几个季度以来,美国的关税问题促使这家苹果合作伙伴在其他国家增加了更多的制造能力。

富士康董事长刘扬伟表示,富士康正在构建两条供应链,一条是中国的供应链,一条是美国的供应链,并透露富士康现在有大约30%的产品在中国以外的国家生产。世界工厂已经不存在了,不管是印度、东南亚还是美洲,每个地方都会有一个制造生态系统,富士康计划继续增加国际制造能力。

尽管全球需求疲软,富士康本季度智能手机业务的营收下降了15%,但仍成功超过了利润预期。伴随苹果公司生产下一代iPhone的计划,预计该业务的营收将在未来几个月迎来复苏。

跟着懂创新的AWS,开启自己的创新之旅

朱 朋博

如果你喜欢创新,内心里还有一些改变世界的想法,你可能会非常羡慕这样的工作环境。

理想中的创新环境

开局,你和其他几位一样各方面都非常优秀的人加入了这家公司的不同部门,你是一个项目的负责人,让你从无到有的做一个项目,你会怎么做呢?

在这样一家公司,他们会先要求你写一份产品发布时候的新闻稿,然后,让别人读一下新闻稿里的内容,如果没有什么亮点那就有人要求你改到有亮点为止。第二步,再写下可能会被问到关于产品的问题以及对应的答案,看你想的够不够周全,最后一步,再写一份产品要怎么做的文档。

听起来似乎有些不可思议,但确实是真的。

随着业务的发展,几年后你们可能有完全不同的境遇,有的业务蒸蒸日上,有的业务丝毫没有起色。一个比较常见的操作是,裁撤没有起色的这部分业务,开除这部分员工,然后,为新的业务招聘新的专业人才。

事实上,这家公司从根本上相信自己的员工是优秀的,能给员工犯错的机会,所以,更倾向于留下这部分员工,新业务从内部找人来,新业务部门中,有的员工来自业务蒸蒸日上的部门,有的可能来自业务发展并不理想的部门,但只要你想得透彻,对服务的本质看得透彻,都能得到充分的授权和资源支持。

创新,完全没有后顾之忧的那种,这样的环境你羡慕吗?

如此创新环境运作的如何?

十几年前,业务蒸蒸日上电商平台亚马逊挑出五十多人出来做服务于业务部分的业务。由于当时的业务部门都各自负责一部分业务,每个业务部门都需要从买服务器,安装软件开始做起,过程中花的钱和时间都非常多,出于提升效率的角度思考,做起了统一的基础设施服务。

后来,由于电商业务有峰值现象(类似于双十一的流量峰值现象),所以,他们选择将闲置资源用来对外提供服务,他们做的事情就是现在非常熟悉的公有云计算服务,他们就是公有云的领头羊——Amazon Web Services(AWS)。

亚马逊除了有AWS,Kindle,Prime,Echo,Amazon Go无人零售等成功创举,其实还有很多失败的业务,比如Fire Phone手机,身处失败业务部门的员工自然是要去做新业务,说明创新本身是有风险的.

而在成功业务部门,比如当年电商业务部门的员工跳出来去做AWS,比如做线上图书零售的跳出来做Kindle电子书,让人跳出舒适区做新的业务对于许多人来说都是莫大的挑战,但在亚马逊却是稀松平常的。

亚马逊有独特的创新文化,创新的动力不是靠顶层设施来进行完整的规划,是一线员工无数创意推动的,很多人可能听说过AWS的双披萨饼团队模式,乍听起来有点莫名其妙,其实我们都知道,小而美的团队商量一件事儿更有效率,毕竟,开会发言的人一旦超过十来个人就没有结果可言了,小而美的团队有天然的科学性。

更重要的是,每个披萨饼团队与整体的关系就好比微服务与云原生架构的关系一样,整体允许微服务失效,但如果微服务有价值则能快速成为整体的一部分,能吸纳各种创新。

亚马逊的创新模式是成功的,最好的例证是AWS。

善于创新的AWS

亚马逊懂创新,也善于创新。亚马逊提供创新的平台,并且提供失败的空间,还有独特的创新模式,这与AWS云计算服务创新方案多,解决方案种类丰富有直接关系,AWS有全球数量最多,种类最齐全的云服务,包括许多真正意义上的创新,做到了让看新闻稿的人有“兴奋”的感觉这点。

这种创新的模式还将继续。亚马逊2020年Q2财报显示,AWS收入达到108亿美元,AWS已经撑起了亚马逊至少一半的利润,而且,AWS的营收保持着30%左右的增长,正在不断的技术创新与市场发展的良性循环中快步前进。

那么,这些能为中国用户带来什么?

并不是说外国的月亮一定圆,亚马逊云服务带来的不只是经过验证的产品技术服务,AWS还能将服务经验落地到中国,让中国用户对接全球最先进的信息化实践。

AWS在实践中创新,将实践中提炼出来的产品具象为产品,将这样的产品交付给用户,用户收获的是一套可以引导创新的方案,背后还有一套创新的思想。

2020年8月4日,我注意到一组有趣的数字,说:AWS全球有175+的服务,而在中国区有150+的服务。这说明AWS在中国市场的服务类型与全球的差异越来越小,AWS大中华区云服务产品管理总经理顾凡表示,我们的目标是,未来AWS全球的所有服务,AWS中国都应该有。。

互联网的发展方向正在从消费互联网转向产业互联网,AWS也一样瞄准了云计算在企业级市场上的价值。顾凡表示,企业用户需要意识到,上云的核心原因不是降低成本,而是能将固定成本转变为可变成本,最重要的是它能让企业变革加速。

从AWS开始加速变革

2020年,Gartner发布一个针对AWS的供应商评估报告——Gartner Vendor Rating,帮助企业用户做IT采购决策,评估其作为战略性的供应商合作伙伴,技术实力如何,发展走势和长期定位如何。在这项评估报告中,Gartner对AWS给予28分的高分(满分为30分),目前还没有其它IT供应商有27分以上的评分。

Gartner在报告中建议企业应该充分借鉴亚马逊的数字化模式,将其作为技术驱动力的范例,在业务中融入数字流程,模仿亚马逊,在寻找新市场机会和响应竞争威胁方面打造敏捷性。借鉴亚马逊的数字化模式,AWS是最佳的入口,顾凡告诉记者:“AWS为亚马逊的各种创新提供了技术支撑,其中云原生架构是关键。”

2019年,AWS中国已经引入了多个容器和云原生相关的功能和服务,除了各家都有的Kubernetess托管服务Amazon EKS,还有自己的容器服务架构ECS,另外,还有更高级的无服务器计算方式的容器服务——AWS Fargate,多管齐下,帮企业构建云原生架构,敏捷业务创新。

2020年上半年,AWS中国陆续发布了数据分析和AI相关的产品和服务,包括在线ETL化工局AWS Glue,交互式查询服务Amazon Athena,在去年年底刚刚完成重大更新的Amazon SageMaker也很快落地到了中国,在解决了用户将数据迁移上云,计算在云上解决的“基础温饱”问题之后,让用户更好地用数据创造价值。

如果用户愿意,那可以跟着懂创新的云开启自己的创新时代。