你好!欢迎来到深圳市品慧电子有限公司!
语言
当前位置:首页 >> 技术中心 >> 传感技术 >> 释放数据的力量 华为推动数据存储产业不断前进

释放数据的力量 华为推动数据存储产业不断前进


进入YB时代,作为信息驱动社会高速发展的核心要素,“数据”已经成为与土地、人口、能源并列的全球重要战略资源,并与数字经济紧密连接。面对大数据、AI等新兴产业、应用的不断涌现,企业数据存储就成了企业发展中最重要的一个环节。

可以预见,在数字经济进一步深化,数字技术进一步发展的背景下,未来数据的地位在商业市场、生产生活中会愈加重要,而数据存储作为数据的可靠底座,也将在未来企业升级与科技发展中扮演更重要的角色。

拥抱数字化时代多样数据应用需求

6月16日,在“华为伙伴暨开发者大会2022”数据存储伙伴论坛上,华为中国政企数据存储业务总经理唐浩表示,“回顾过去三十年存储发展历史,数据存储一直是高价值数据的最佳底座,并伴随着数据应用的发展而发展。进入新时代,数据应用日新月异,以分布式数据库、大数据、AI、高性能数据分析HPDA为代表的新兴应用不断涌现。华为存储将深入践行‘以数据为中心’的理念,积极拥抱数字化时代日新月异的多样化数据应用需求。”

华为早在2002年就开始对数据存储技术进行研发投入,经过20年的持续创新研发,华为存储逐渐从入门跟随,逐渐领先行业,如今华为存储在全球布局了12个研发中心,拥有超过3000项存储专利,主导和参与30+国际产业组织,是推动数据存储产业前进的重要力量。目前华为存储产品齐全,包括OceanStor Dorado全闪存存储,专为海量数据场景设计的OceanStor Pacific系列分布式存储,OceanProtect专用备份存储以及FusionCube超融合基础设施等。

唐浩介绍称,“华为OceanStor Dorado全闪存已经广泛服务于各行业的核心生产应用,树立了高可靠和高性能的业界口碑,华为OceanStor Dorado全闪存存储基于原生全闪存架构,包含大量创新。例如:为了满足极致的业务可靠性诉求,采用独特的SmartMatrix全互联架构,通过硬件全互联和部件全冗余,将故障域降至最低。同时华为OceanStor Dorado全闪存采用独创的FlashLink智能算法,充分发挥闪存性能,做到了高达2100万SPC-1 IOPS以及0.05ms极致低时延,可以说是业界最快的全闪存存储。如今,全新一代OceanStor Dorado,在领先的SAN基础上,持续增强NAS能力。以防勒索、WORM为代表的丰富安全特性,实现文件跨部门安全共享。业界唯一支持AA架构SAN/NAS一体化双活,保障业务持续在线。”

“面向海量数据存储场景,华为推出全新OceanStor Pacific系列分布式存储。全新一代OceanStor Pacific有三大特点:面向混合负载的架构设计,一套存储同时支撑高性能计算、大数据分析、AI多样化负载;通过硬件的高密设计和软件的高利用率EC算法,实现海量数据存储的最优投资回报率;通过多数据中心多活和节点故障快速切换,实现永远在线的数据服务。”

相比于面向数据中心的通用型存储产品,华为FusionCube产品则是面向场景化的超融合产品。在资源效率、绿色节能、新兴应用上实现了进一步增强。

唐浩介绍称,“华为FusionCube目前有两大系列产品,FusionCube 1000 是面向数据中心打造的全栈一体化解决方案,通过融合计算、存储、网络等资源为数据中心应用提供极简、高效、可靠的虚拟化环境;通过预集成实现快速整柜交付,支持业务快速上线,灵活扩展;FusionCube 500是针对企业分支场景环境复杂、空间紧凑、IT人员配备不足、标准机房建设困难而设计的一款小型化新品,集计算、网络、存储、AI、安全等数据中心所需元素于一体, 单设备仅5U高度,较业界普遍采用的标准机柜+通用硬件部署方式,节约54%空间占用;低噪音(低至53dB),办公环境亦可部署,无需专业机房;即插即用,远程可视可控可管,分支站点无人值守。”

唐浩认为,数据已经成为企业重要的资产,数据保护迫在眉睫。自然灾害、病毒攻击和非法入侵等都有可能引发数据事故,造成经济损失。因此备份存储是实现数据保护的重要手段。

华为全面升级OceanProtect专用备份存储系列产品,就是专为数据保护而打造的,它具有备份快、恢复快,用量省,高可靠的特点。唐浩表示,华为OceanProtect的备份带宽达155TB/小时,是业界3倍,恢复带宽172TB/小时,是业界5倍,这些亮丽的产品能力背后是一系列创新架构和算法突破。例如,华为OceanProtect采用了创新的多流引擎技术,多节点分布式并行架构,消除单点备份性能瓶颈,实现多流并行备份处理。通过多层在线变长重删和特征压缩等创新算法突破,持续提升数据缩减率,在同等空间内能多备份20%的数据。同时华为OceanProtect采用AA架构,实现高可靠,单控制器故障秒级恢复,备份任务不中断。

有了配置丰富且性能可靠的存储产品用以形成数据资产的宝库,与之相配套的存储软件管理则是打开这座宝库的钥匙。以数据管理引擎DME为例,创新引入了AI的能力,希望能够逐步实现自管理、自调优、自修复的自动驾驶存储。

“除了存储设备的集中统一管理,我们还致力于实现从规划、建设、维护、优化全生命周期运维场景的自动化。预期可以带来超过20%的资源效率提升;降低20%的OPEX,以及缩短10倍的业务上线周期。”唐浩说。

唐浩以银行业务变更流程举例说,“在传统方式上业务变更之前需要IT运维工程师出具设计脚本,单一任务的脚本准备需要约45分钟,在变更执行过程中为了确保万无一失,还得需要安排5名工程师待命以应对突发问题。借助DME自动化后,在变更准备阶段,通过数据的归一化搜集和自动化的命令执行,单任务脚本准备时间从45分钟降低到10分钟,准备效率提高了75%;而在变更执行阶段,通过自动化能力的引入,变更前预审时间从20分钟直接锐减到半分钟。另外,针对变更执行过程中可能产生的人力成本,DME能够实现所有任务的并发执行,极大的减少人力的投入,整体降低了60%的变更成本。”

在数据中心基础设施层面,华为DCS数据中心虚拟化的目标就是帮助企业构建轻量弹性、多元开放的数据中心基础设施,让数据中心的资源获取及运维管理更敏捷高效,将开发运维人员从繁琐的资源管理和设备维护工作中解放出来。

“DCS有四大亮点:敏捷应用。自研的高性能&高安全的iSula容器引擎,保证业务安全,满足时间敏感业务需求;容器&虚拟化提供双栈基础设施能力,同时支持两地三中心容灾架构,可以最大化的保障业务连续性及核心数据的安全可靠;轻量弹性。DCS支持2节点无仲裁节点技术,实现轻量化起步,所有功能支持平滑演进,为客户提供整体TCO最低的资源池解决方案;智能管理。通过华为自研的统一管理&智能调度平台,可以实现从应用、虚拟机&容器到基础设施的端到端管理;多元生态。面对企业客户现网已普遍多云场景,DCS方案北向开放REST API对接多厂商云管实现无缝融入,降低管理复杂度;南向兼容多样化算力等异构硬件资源,保护客户既有投资。”唐浩在演讲时如此表示。

在解决方案架构创新层面,唐浩分享了两个案例予以说明,“传统的大数据应用通常是采用服务器计算存储一体化架构,当数据量增加时,计算、存储只能同时扩容,造成资源不匹配,华为大数据存算分离架构将计算与存储解耦,实现了算力不足扩计算、容量不足扩存储,不仅实现了服务器、存储设备数量的大幅减少,而且还让计算资源跟存储资源都得到了很好地利用。”在这一过程中华为创新采用了大小I/O自适应数据流设计:大I/O直接写存储层,小I/O在缓存层聚合后再写入,大小文件智能预取,极大提升数据访问效率;SmartTakeover智能纳管第三方HDFS集群,能平滑地接入传统Hadoop计算存储一体化架构,实现数据0迁移,应用0改造;华为大数据存算分离方案兼容主流大数据分析平台及组件,包括Cloudera、Hortonworks、星环等,满足企业级大数据分析需求。

另一则分享案例则是关于分布式数据库存算分离方案的创新。在演讲中唐浩提到,分布式数据库是目前新兴业务部署的主流架构,但在金融和运营商等行业进行分布式改造的实践过程中发现,基于通用服务器提供计算和存储资源存在突出的问题,因此,华为分布式数据库存算分离方案,存储按需配置,有效提升资源利用率。当主节点发生故障,系统恢复时长从24小时降低到2小时,有效提升运维效率。同时通过采用RoCE网络,时延接近本地盘。

在全社会节能降碳的大背景下,作为数据中心的重要组成部分,华为存储同样有所作为。在生产制造上,华为存储制造工厂大规模使用光伏发电,产品大量使用铝、锡等可再生材料;在产品使用端,华为存储产品通过提升硬件密度、缩减数据总量、提升资源利用率,极大减少存储产品自身碳排放。

坚持开放、共享 ?持续做好被集成

随着数字经济的澎湃发展,数字产业的持续深化,数据的存储与处理能力正成为加速数字化转型的坚实底座。但是,就如土地与庄稼的关系一样,土地肥力再强也无法直接被消费者享用,只有在肥沃的土地上长出的庄稼才是消费者所需。

正是基于这样的理解,华为数据存储开启了与合作伙伴构建联合解决方案的思考。在打造行业解决方案的过程中,华为越发认识到坚持开放、共享,持续做好被集成,是华为数据存储解决方案融入千行万业的必经之路。

未来,面对产业数字化与数字产业化不断推进带来的机遇和挑战,无论是数据资产应用场景的拓展,还是数据价值进一步的高效融通,都需要建立在扎实的数据存储基础之上。华为中国政企数据存储业务总经理唐浩表示:“在我国逐步走向数字经济蓬勃发展的新时期,千行万业加速全面数字化转型,华为数据存储始终与合作伙伴,在多元化业务场景中携手共进、砥砺前行,打造共赢生态,释放数据潜能!”

用户评论

发评论送积分,参与就有奖励!

发表评论

评论内容:发表评论不能请不要超过250字;发表评论请自觉遵守互联网相关政策法规。

深圳市品慧电子有限公司