新数据时代驱动存储大变局:中国品牌首次集体入围全球第四
导语
紧随服务器产业互联网化、智能化脚步,传统企业级存储市场开始新一轮洗牌,新的市场格局逐渐显现:中国企业存储品牌浪潮、华为、联想首次集体入围全球前四,与Hitachi、IBM存储并列全球第四。
一向与服务器产业并驾齐驱的企业级存储市场,也紧随服务器产业互联网化、智能化脚步,开始新一轮洗牌。
传统企业级存储市场格局正在重构。据IDC日前公布的2018年三季度《全球企业级存储系统市场调查数据报告》显示,中国企业存储品牌浪潮、华为、联想首次集体入围全球前四,与Hitachi、IBM存储并列全球第四。另据IDC2018年上半年《中国企业级存储系统市场调查数据报告》显示,2018年上半年中国市场存储出货量为67,358套,浪潮存储出货量8,414套,跃居中国企业级存储(不含监控)市场第一,增速106%,5倍于业界平均增速,同时入围Gartner分布式存储魔力象限;紧随其后的是华为、戴尔易安信、曙光、联想、华三等。
短短一年,中国企业级存储市场到底发生了什么变化?
表1 2018第三季度全球整体企业级存储市场实现双位数增长(19.4%)
图1 浪潮存储跃居中国企业级存储(不含监控)市场第一,增速106%,紧随其后的是华为、戴尔易安信、曙光、联想、华三等。
“新数据需求”
催生企业存储大变局
最近几年,随着云计算、大数据、人工智能、物联网、区块链等技术的快速发展,以及人脸识别、自动驾驶等智能应用的不断涌现,数据获得指数级爆发式增长,数据形态从过去相对简单的结构化数据转向大规模非结构化数据为主,数据成为企业核心资产和基础生产资料,全球正进入新数据时代。
据IDC预测,全球数据总量预计2020年达到44个ZB,中国数据量将达到8060个EB,占全球数据总量的18%。
随着数据量的指数级增长,数据类型多样性、数据源的增加,企业IT基础设施包括存储系统面临的挑战,无疑也随之增加,包括存储规模、存储性能、数据共享和管理的复杂性等。
例如,在传统数据中心,不同业务系统的数据,以及不同品牌的存储产品混合在一起,形成烟囱式的存储系统结构,数据资源无法融合共享,存储架构复杂、维护成本极高。而云计算时代,在超大规模互联网云数据中心和企业大中型数据中心,云计算应用多达几十种、上百种,可能存在几百个、甚至上千个虚拟机,承载着成千上万个虚拟桌面,数据规模达到EB级别,这需要后台借助庞大的存储集群来服务存储数据,如何建立满足用户需求的高性能存储集群成为这类企业面临的巨大挑战。
另外,在AI应用中,要从视频、图片、语音、文本里拿出很多小文件等原始数据,进行标记、处理和模型训练,有时候,一个大型AI应用需要处理的小文件数量达到万亿级别,能否以亿级IOPS(每秒输入输出量或读写次数)来有效处理这么多小文件,也是新数据时代对存储系统性能提出的新挑战。
随着传统企业互联网+的兴起,企业为了追求数据价值最大化,不仅需要内部各部门之间数据共享,还需要全集团的数据共享,甚至还需要对大量来自互联网的数据进行统一管理,这对数据的共享与管理带来挑战。数据要实现共享,可能牵扯到几百个乃至更多的数据存储节点,涉及数万个数据卷或者数百万个文件,需要通过统一架构来支撑、统一管理平台来调度数据资源,因此企业存储系统在数据共享和管理上面临着诸多技术挑战。
这些挑战不仅引发传统企业级存储产品的技术革新,如从传统存储(即磁盘存储)的Scale-up纵向扩展架构转向目前业界主流的Scale-out可横向扩展的分布式架构,实现存储系统的“硬件重构、软件定义”,也带动中国存储产业在严重同质化的传统市场格局中快速转向。
所谓硬件重构,即从以CPU为中心的架构切换到以DPU(专门用于数据加速的芯片)为核心的硬件架构;软件定义,即通过将数据中心的存储资源抽象化、池化,以软件服务的方式,在不增加用户成本的条件下,存储容量和性能能够随着非结构化数据的增长而实现横向扩展,从而简单、快速地满足应用按需、自动化使用存储需求。
浪潮存储产品线总经理李辉
软件定义存储(SDS)正成为新数据时代主要的企业存储方式。面对SDS的兴起,以浪潮为代表的国产品牌企业级存储厂商,早在两年前已经洞察市场需求并快速布局。据浪潮存储产品线总经理李辉介绍,浪潮依托“软件定义+硬件重构”理念,力推基于Scale-out架构的分布式存储,尤其强调面向客户的实际应用,对软件和硬件进行集成测试,最大程度满足新数据时代企业存储在容量、性能、架构及管理上的需求。
联想主推的超融合系统基于通用x86服务器的软件定义基础架构,融合计算、存储、网络、虚拟化、管理能力于一体,实现一体化交付。华为提出的STaaS(存储即服务)解决方案也是统一管理存储资源,根据服务目录,提供按需供给的数据存储服务。
Gartner调研显示,目前大约40%企业数据存储在可横向扩展的企业数据中心或云数据中心;到2022年,这一比例将超过80%。IDC预测,2017年至2021年,全球软件定义存储(SDS)市场年复合增长率将达到13.5%,2021年营收达到约162亿美元。
事实显示,随着软件定义存储(SDS)市场需求的快速增长,抓住市场机遇的浪潮、华为、联想等中国企业存储品牌获得飞速发展。
决胜“场景定制化”能力
不同于传统企业级存储系统的简单售卖模式,新数据时代的企业级用户对数据存储形态、部署环境、应用模式和价值需求方面都提出更为精细化的需求,并且不同垂直行业的存储需求不同、不同场景更是呈现出明显的差异化需求。
例如,在石油勘探行业,石油勘探过程中生成的数据体量非常庞大。一般二维数据可达1~2TB,三维数据可达数百TB甚至PB级,一般单文件大小也都在200GB左右;对收集上来的海量数据还需要提供TB-GB级读写性能,来满足前端的密集计算和模拟。如果要缩短地震资料处理周期,让IT基础设施提供更强大的性能,就需要共同优化数据存储和计算平台。计算平台可以在CPU处理的基础上通过增加GPU来进行加速;而数据存储平台,则需要进行从硬件架构到软件功能的创新。
在科研与航空卫星行业,遇到数据存储问题需要及时反馈、快速处理,因此实时处理、极速响应是这个行业存储服务的常态。
在广电媒资行业,从4K到8K到VR 2K,一方面,观众对高品质、零等待的浸入式体验追求无止境,另一方面,短视频、直播平台等新产业发展,亟需广电企业进行多元化融合,以提升用户粘性、实现资源整合和创新;这要求存储厂商必须以场景化应用为核心来开发存储产品与解决方案。
针对当前精细化、差异化的企业存储新需求,场景定制化能力、深挖数据价值是考验存储厂商服务能力的主要指标,也是品牌存储厂商决胜企业级存储市场的关键。
正如Gartner 副总裁Stanley所说,“中国存储厂商只要能通过技术创新,帮助用户设计架构和建设基础设施,促进用户做出更好的业务决策或者创建更多的业务机会,帮助企业增加收入,那么中国存储厂商在商业方面就比较容易能够成功。”
Gartner 副总裁Stanley
场景定制化服务落地的关键是围绕用户的价值,进行端到端对接。这对存储厂商的研发能力、服务能力、管控能力的要求很高。
为此,浪潮存储在研发方面一直坚持“场景驱动开发”模式,针对典型场景提出快速定制型开发和优化方案。目前浪潮存储把新老应用重新定义为传统企业级应用、视频监控、高性能计算、广电媒资、云计算、大数据和人工智能等七大一级场景,并将之分解为近百个二级场景。截止目前累计完成了近60个二级场景的定制和优化,尤其是在云计算、大数据和人工智能等方面,已经做了大量定制和优化工作。
华为强调在项目实施上提供更精细化的服务,如从架构设计到系统上线后的运维管理的每个细节都进行优化;联想也提出与合作伙伴深度合作,针对应用场景进行优化设计。
场景定制化模式广受行业用户好评。比如东方物探基于浪潮软件定义存储AS13000,构建了34节点、4PB石油勘探海量存储集群,目前单节点业务带宽超过1GB(读带宽1.2GB/s,写带宽1.5GB/s),聚合带宽达到34GB/s,实测性能提升了7倍。成都市智能交通管控系统引入浪潮软件定义存储AS13000之后,骨架路网的图片检索用时从十几秒降低到3秒以下,交通监控图片取证实现“秒开秒解”,极大提高业务效率。为了保证2018世界杯期间全高清环境下视频录制和非编业务的顺畅运行,浪潮存储联合索贝提供7X24小时工程师驻场服务,随时待命进行技术调优。
IDC预测,2018~2022五年间,企业级存储市场年均增长率将达到7.2%,存储容量总量将达到88EB,政府、金融、电信等行业仍是存储采购的主力,教育和医疗健康行业潜力巨大。可以想象,凭借软件定义存储(SDS)技术创新和场景化定制服务能力,中国企业级存储品牌未来仍将获得快速增长的市场空间。
原创转载请务必注明来源: