《联想:凌拓:2023软件定义存储解决方案白皮书(31页).pdf》由会员分享,可在线阅读,更多相关《联想:凌拓:2023软件定义存储解决方案白皮书(31页).pdf(31页珍藏版)》请在三个皮匠报告上搜索。
1、欲了解更多联想凌拓的相关资讯欢迎访问公司官网 http:/ B 站联想凌拓软件定义存储解决方案白皮书近年来,依托于 CPU、内存、网络、存储介质等基础技术的飞速发展,软件定义存储技术日趋成熟。众多软件定义存储产品凭借其高灵活性、高性能、高可用、高可靠以及高性价比赢得了市场的认可。软件定义存储的概念于 2012 年 8 月被首次提出,当时在大多数人的心目中这是一个比较新的概念,但实际上,采用软件技术来构建存储平台的历史,最早可以追溯到 1993 年。那么软件定义存储和长久以来的存储软件的关键区别在哪里呢?作为云计算时代的新型存储,软件定义存储从一开始就是为了满足云计算的挑战和需求来设计的,所以具
2、备以下几个特征:横向扩展伸缩的分布式架构 软硬件解耦,一套存储软件能够适配多种通用服务器 控制面和数据面解耦,可以按照需要融合或者分离部署 管控平面提供丰富的开放 API 来实现管理运维自动化由此可见,软件定义存储一方面沿袭了存储软件深厚的技术积淀,同时又在传统的单体化软件架构基础上发展成更适合云计算的新形态和新架构,其采用规模随着整个信息技术产业快速向云的转型升级也在飞速增长。根据 IDC 的数据显示,软件定义存储在中国整体存储市场中的占比为 27.3%,预计在 2026 年,中国软件定义存储的市场规模将接近 45.1 亿美元。除应用规模飞速增长,我们也明确观察到软件定义存储领域中已经出现或
3、正在发生的几种趋势性转变:从适用于特定场景,向适用于普遍场景的转变 从支撑简单应用系统,向支撑复杂应用系统的转变 支撑非核心业务系统,向支撑关键业务系统的转变软件定义存储消除了存储技术对专有定制化硬件的依赖,打破了传统集中式存储在扩展性、可用性、可靠性等诸多方面的限制,可以采用更灵活的基础架构来构建存储平台,既能够支持存算分离的云平台,也能够支持存储融合的超融合平台,使存储平台从过去的依赖专有硬件转变为以完善的架构来保障可用性、可靠性。这是一种从 Mission Critical 到 Business Critical 的转变,也是技术发展不可逆转的趋势。软件定义存储为存储技术突破了发展的桎梏
4、,开拓了新的发展空间,并提供了强劲的源动力。联想凌拓从创建之初就着力于软件定义存储技术和产品的发展与创新。在联想凌拓的产品体系中,软件定义存储一直占据着重要地位。2021 年 6 月 18 日,联想凌拓发布了全自主知识产权的软件定义数据管理平台 MagnaScale 1.0,是联想凌拓产品体系中浓墨重彩的一笔。经过近三年的发展,MagnaScale 目前已经历几轮迭代到更高的版本,其性能、稳定性及各项企业级功能日臻完善,为中国的存储生态圈注入了创新与活力,并在激烈的市场竞争中赢得了一席之地。未来,联想凌拓将继续致力于技术研发和创新,提供更加出色的软件定义存储产品和解决方案,推动软件定义存储技术
5、的发展。可以断定,软件定义存储技术将在联想凌拓的不断发展中发挥着至关重要的作用。我们身处科技与技术飞速发展的黄金时代,随着云、大数据和人工智能的不断成熟,软件定义存储技术也势必大放异彩。我们有充分的理由预见,软件定义存储将成为存储技术的主流,并引领存储技术的发展方向。联想凌拓 CEO寄语目 录在工信部 2021 年 11 月 30 日发布了“十四五”软件和信息技术服务业发展规划中,明确的表述了深化软件定义。加快发展软件定义计算、软件定义存储、软件定义网络,重点布局工业互联网、云计算、大数据、人工智能、自动驾驶等新兴软件定义平台,软件改变世界的时机已经成熟,一方面是软件的迭代速度快,另一方面是大
6、规模效应强,无论是计算、网络、存储,还是其他传统 IT 基础架构都发生着巨大的改变,软件和硬件在逻辑上是等价的,以服务器计算、存储、网络等资源池化为基础,实现虚拟化资源的按需交付,按量计费,越来越多的大型企业及行业将离不开软件,软件服务无处不在,我们在向混合云和软件定义数据中心迈进的过程中,通过软件定义这一思路,SDDC、SDN、SDI、SDS 等衍生技术都有了自己的发展路径,在各自领域的架构创新时起到了重要作用。另一方面,随着数字技术的不断发展,ChatGPT、AIGC、机器学习、云计算、5G、IOT、边缘计算等技术不断更新,社会的各行各业也在不断推进行业大模型和数字化建设,数据成为促进企业
7、新时代下成功的核心要素。根据 IDC 发布的相关报告显示,全球数据将从 2020 年的 44ZB 增至 2025 年的 175ZB,中国数据占全球数据比重将从 23.4%发展到 27.8%,成为全球最大的数据圈。我国数字经济蓬勃发展,党的二十大报告对数字经济的展望,报告指出加快发展数字经济,促进数字经济和实体经济深度融合,打造具有国际竞争力的数字产业集群。这也带来了超大的数据体量,对存储系统的存储容量、可用性、性能等方面也提出了更高的要求。前言软件定义存储的挑战与机遇01前言中国软件定义存储市场格局软件定义存储发展方向的思考联想凌拓软件定义存储产品家族ThinkSystem DXN 分布式软件
8、定义存储系列ThinkSystem DXL 分布式对象存储系列ThinkSystem DX1100U 系列ThinkSystem DXS 分布式块存储系列联想凌拓国产化分布式存储MagnaScale 数据管理平台总结0405挑战 -在 2002 年之前,大多数企业只有一种类型的数据库:关系型数据库,20 多年后的今天,据统计企业的数据库类型至少有 7 种:关系型数据库、NoSQL、图数据库、时序数据库、内存数据库、搜索引擎 Elasticsearch、文档数据库等,主要是因为数据源的增加导致数据类型的多样性,以及伴随而来的企业数据的爆发式增长,导致企业的 IT 基础设计日
9、益复杂,例如,在超大规模的数据中心里,服务器设备的数量越来越多,数据计算集群和应用的集群规模都非常大,虚拟化、容器技术会承载越来越多的应用。在这样的环境下,存储需要支撑上万台的物理机和数十万台虚拟机的运行。作为基础设施之一的存储,无疑将面临巨大的挑战。再以 5G、AI/ML 等新型应用为例,以视频、图片、文档为代表的非结构化数据将成为数据存储的主流形式。一台 L3 级别的自动驾驶测试车,每天产生 60TB 的数据,完整测试产生的数百 PB 数据需要存储 30 年以上;一台最新的基因测序仪,每天产生 6TB 的数据,一次基因测试需要在 1 小时内提供报告,且基因数据要求永久保存(来源:分布式存储
10、产业方阵)。数据呈现爆发式增长,但企业对于数据的认知,还远远不够,据分析报告称:企业中被存储的数据大概只占到数据总量的 1.5%左右,这意味着大部分的数据其实被丢弃了,只有极少的数据可以借助存储设备保存下来。再者,中国大量的企业经过数十年快速发展,信息系统已经具有相当规模,但不同部门、不同业务信息数据往往无法互通,只能在各自设备中储存,无法统一进行管理、利用,没有针对企业整体的全局视角,当需要进行跨业务的数据合作时,往往要进行大量的数据迁移、拷贝,大部分的人力资源都耗费在数据准备阶段。如何让跨部门、跨系统的企业数据更好地被共享,使企业内部的数据分析专家能够随时获取数据,把高质量的数据自动并实时
11、地推送给有需求的人,同时符合数据权限和隐私等方面的合规要求,是实现数字化转型的重要基石,也是很多企业目前面临的挑战。最后,数据安全与合规已成为企业 IT 建设、安全稳定运行必须要考虑的事情。而存储设备作为“数据保险箱”对于确保数据安全至关重要,一旦因为存储故障出现数据丢失,将给企业带来无法挽回的巨大损失,国家在 2021 年 9 月出台的数据安全法中对此也有明确的表述:组织机构要加强风险检测,发现数据安全缺陷、漏洞等风险时,立即补救;发生数据安全事件时,立即采取处置措施,及时告知用户并向有关主管部门报告。挑战和机遇往往是并存的,数据量暴涨,其作为战略资源和关键性生产要素,价值不言而喻,有价值的
12、数据资源是催生和推动数字经济新产业、新业态、新模式发展的基础,能极大地推动创新、加速产业升级。对中国来说,国内的“数据圈”从 2018 年 到 2025 年将会扩张 14 倍左右,以每年 30%的平均增速快速发展,在 2025 年达到 48.73ZB。中国将远超美国,问鼎数据圈的“金山”,数据量即将成为全球第一。坐拥如此庞大的数据体量以及未来的增长潜力,谁能率先认识到数据的重要性、对丰富的数据资源加以合理运用,谁就能迅速把握时代风口、抢占行业先机,并创造惊人的经济利益。在国家政策层面,中共中央政治局于 2021 年 10 月 18 日就提出推动我国数字经济健康发展建议,要充分发挥海量数据和丰富
13、应用场景的优势,促进数字技术与实体经济深度融合,赋能传统产业转型升级,催生新产业、新业态、新模式,不断做大做强做优我国数字经济。二十大报告中也强调,要坚持把发展经济的着力点放在实体经济上,推进新型工业化,加快建设制造强国、质量强国、航天强国、交通强国、网络强国、数字中国。在 2025 年,中国外置存储市场将达到 77.6 亿美元,其中软件定义存储以及超融合都将在未来 5 年达到 13%以上的复合增长率(来源:IDC 报告),市场占有量逐渐提升。不难发现,软件定义存储(以分布式存储为代表)将是全球数据存储产业的未来趋势(增量市场),谁能率先洞察这个产业发展趋势并付之于行动,谁就会在未来数据存储市
14、场的竞争中占据 C 位。联想凌拓作为一家具有优秀存储基因的智能数据管理解决方案公司,以中国客户需求为导向,依托国际领先的技术基因,结合本地化人才优势、研发创新实力、业务覆盖和服务网络,致力于不断推出领先的智能化数据管理技术,帮助客户释放数据的惊人潜力,全面打造现代化 IT 架构,加速企业实现数字化转型。凭借在中国市场研发、生产、销售,不断加强在软件定义存储领域的投入,为中国客户提供先进的,差异化的,基于软件定义存储的数据管理和服务。机遇 -0203当前,在国际形势、经济转型、技术发展、内需调整等内外部因素的影响下,软件定义存储发展并不均衡,根据 2021 年至 2022 年 IDC 软件定义存
15、储在行业的市场空间观察可知,中国软件定义存储市场 TOP5 行业是政府、电信、金融、教育和公共服务,TOP5 行业的份额占比达 71.9%。在电信、金融、制造、交通等行业数字化进程快的行业保持高速增长趋势。中国软件定义存储市场格局0405金融以金融行业为例,数字化时代已经从“以账户为中心”转变为“以客户为中心”,在业务层面,借助数字技术对零售业务、支付业务、中间业务、互联网金融等进行重塑,进一步增强了银行的市场意识。在技术层面,商业银行对大数据、人工智能、区块链、分布式等新兴技术的研发、创新和应用水平不断提高,而在存储等底层基础架构上,逐渐推动核心体系由集中式架构向分布式架构转变。政府政府行业
16、,在国家政策大力引导和产业各界的共同推动下,数字政府市场加速扩大,政府用户对数据存储需求明显提升。国家“十四五”规划纲要提出,对提高数字政府建设水平做出战略部署,将数字技术广泛应用于政府管理服务,推动政府治理流程再造和模式优化,不断提高决策科学性和服务效率。同时,在政府公共基础设施平台建设上,要形成互联互通、安全防护、共享交换、云计算、数据分析、容灾备份等综合服务能力,支撑数据共享汇聚和政府各部门间业务协同。运营商中国移动是全球用户规模、网络规模最大、市值排名领先的电信运营商。中国移动在 2016 年把握趋势,坚持创新驱动,聚焦价值提升,制定并实施了“大连接”战略,加速推进转型升级。为了配合战
17、略转型,以业务为主要驱动力的 IT 系统建设也在发生着深刻的变化,云计算、大数据、5G、物联网等业务的快速发展,带来了数据量的急剧增长,对性能、带宽等也提出了更高的要求。分布式存储架构,具有容量、性能、带宽线性增长等特点,成为存储系统的重要发展方向。制造业、交通业制造业、交通业对数字化转型要求也在不断深入,数字经济与实体经济高度融合,对于制造业和交通业的企业来说,如何提升企业内部、企业间的集成与协同,进而达到效率与价值的双提升,是制造业和交通业企业数字化转型的关键,面对转型中的不确定性,企业希望投入最少的成本来试错,后期体现效果后再逐步建设,因此对数据存储的需求也是启动快,兼顾成本和功能特性,
18、为确保关键应用的稳定可靠,传统的存储技术已无法满足海量数据的存储需求,软件定义存储的分布式存储技术能有效应对 PB 级别数据量的存储,为敏态 IT 提供数据底层。随着互联网信息技术的不断发展,交通业、制造业等行业的改革进程加快,产生的新应用新业务也急需更多的数据存储,未来对分布式存储的需求也将进一步扩大。数字来源:IDC China SDS&HCI System Market Overview,20220607联想凌拓母公司之一 NetApp 是软件定义存储的坚实支持者,ONTAP 更是被视为“软件定义存储”(SDS)战略的核心,它可以在应用上提供自我服务、虚拟化存储服务以及集群模式的存储系统
19、,各类应用根据相应策略自动配置和管理存储,“这正是软件定义存储的有趣之处”。软件定义,其本质就是将原来高度耦合的一体化硬件,通过标准化、抽象化解耦成不同的组件和功能模块,围绕这组件和功能模块,建立起虚拟化软件层,以 API(应用编程接口)的方式,实现原来专用存储硬件才能提供的功能,而且软件定义存储(SDS)的概念还在不断进化中,现在我们常用的定义一般是基于 SINA 对于 SDS 的描述:SDS 存储软件通过抽象、池化和自动化,将标准服务器内置存储、直连存储,外置存储,或云存储等存储资源整合起来,应用通过元数据来请求相应的数据服务,包括空间部署、数据保护、数据高可用和安全等,通过元数据自定义的
20、形态来实现自我的存储服务,最终达到“存储即服务”的目标。软件定义存储发展方向的思考(来源:SNIA Software Defined Storage White-Paper)The Big Picture of Software Defined Storage 软硬解耦还是软硬一体机关于软件定义存储“软硬解耦”和“软硬一体”两种发展思路的争议一直不绝于耳,不过随着时间的推移,似乎后者渐渐占据了上风。“软硬一体”强调的是开箱即用,经过优化和验证的硬件平台,以及软硬件统一服务,更加省心省力,这比较适合绝大部分企业使用。纯软件的方式会带来更多灵活的自由度,避免了厂商锁定,可以根据自身使用情况灵活的调
21、整。当然,用户可能会担心软硬解耦后,原来由存储厂商完成的软硬件匹配、优化测试等一系列工作转嫁到了用户身上,不仅性能上不如专业存储设备,同时还变相提高了部署、维护的难度,增加了总体拥有成本。联想凌拓从自身出发,无论是软硬一体机还是软硬解耦都能给客户很好的体验。针对软硬解耦有顾虑的客户也提供专业 Hardware Certified 服务,通过自动化流程工具能快速帮助用户完成硬件平台的认证适配工作,解决兼容性的“后顾之忧”。对于第三方硬件认证过程,联想凌拓有一整套规范的流程和自动化工具:虽然软件定义存储在不断的发展进步中,但相较于传统存储清晰的定位和成熟的市场空间,大家对 SDS 的认知上还会存在
22、一些差异,没有形成共识,这当然也是新的体系建立必然要经历的过程。软件定义存储是否适用于“关键业务”应用市场上之所以有这样的疑问,主要的原因在于缺乏软件定义存储的实践经验。与集中式存储阵列相比,软件定义存储是一个“易学难精”的产品,基于开源的厂商很多,同质化问题是所有基于开源的厂商不得不面临的问题,由于架构限制,很难在不动架构的情况下,真正拥有差异化竞争力,并且往往越往上发展,越缺少专业存储知识的积累,从而导致持续发展的能力不足。关键业务应用对于存储的可靠性、稳定性有着极致的要求,软件定义存储本身作为一种松耦合架构,采取了非常多措施来确保系统的可靠性、稳定性,确保存储数据不丢失,例如,利用通用服
23、务器的成本优势,软件定义存储采用多副本、纠删码、磁盘校验等技术确保数据的稳定、可靠性和安全,多副本数据被分散到不同的节点、机柜、机架,确保不会因为单一硬件故障,造成数据的丢失和不可逆。随着服务器硬件等节点的性能和质量不断提升,已经具备运行关键业务应用的能力,这在很多计算应用的场景已经得到了证实,也为软件定义存储奠定了稳定、坚实的基础。此外,软件定义存储横向扩展的能力更加有助于用户应对海量数据存储带来的挑战。如今的云原生技术成为了应用软件发展的主要趋势,通过容器+微服务化设计,云原生应用在适应容器的调度、故障隔离的能力极大增强,也更加能够适应迭代更新的需要,云原生应用的发展也降低了对于单一硬件可
24、靠性的依赖,这种发展趋势,也有助于软件定义存储的推广和应用。全闪分布式存储是否代表未来软件定义存储架构发展的趋势答案是肯定的,存储的第一性原理是追求性能更快、容量更大、管理更简单,全闪存的分布式存储系统具有更高的性能、扩展性、企业级存储特性以及更低的能耗。要发挥全闪存带来的优势,存储软件堆栈需要针对全闪存存储介质进行端到端的重构和优化,比如:IO 免锁设计、优化写放大问题、垃圾碎片回收、数据缩减等。近年来 NVMe over Fabric 协议的发展,打破了传统SCSI 协议对性能的限制,能更好的发挥高性能存储介质的性能,取代传统的以磁盘为中心的 SAN 技术,让企业能够通过网络无缝连接闪存,
25、释放闪存性能优势。而对于活跃的数据,超高性能闪存硬件将取代机械硬盘成为主流。0809提交认证申请准备环境服务部署和检查执行自动化测试并生成测试报告测试报告评审发放证书硬件检测和 OS安装是否满足最小硬件需求是否PASSPASS更新硬件分为兼容性和性能2 种认证证书对硬件要求和检测结果有疑问可咨询联想凌拓认证团队联系联想凌拓认证团队排查问题更新硬件FAILFAIL下载测试规范和测试工具评审不通过重新执行测试第三方设备认证流程图块存储文件存储对象存储大数据存储存储模式数据库、虚拟化为主共享文件为主海量的非结构化数据,提供 API 访问适配各种数据源、不同类型(结构化/非结构化)不同格式,数据聚合数
26、据类型小 IO 随机并发性能和延迟大文件连续 IO 访问海量数据并发访问和检索高性能、高吞吐率、低延时性能要求高中低中数据价值与单位成本 是统一存储还是分不同存储场景软件定义存储发展到现阶段,应用的场景和定位也越来越清晰,如果从混合云角度,更多倾向用统一存储服务,软件定义存储为混合云架构提供后端存储,因为无论是混合云还是云原生,常用于一些新的业务应用,这些新的业务应用对存储的需求是具有“不确定性”的,因此拥抱新业务,以确定性解决方案应对不确定性的业务,混合多种协议的统一存储无疑是合适的。虚拟化和云计算的基础是计算虚拟化,但计算虚拟化对软件定义存储的资源更多是要通过 SCSI/iSCSI/RBD
27、 提供块存储的接口服务,如同在 AWS 公有云中经常以 EBS 块存储作为自己的存储空间,为业务运用的 EC2 实例提供块存储服务,这也是比较常见的场景。在数据的世界里,非结构数据体量远超结构化数据,这也意味着软件定义存储这种多节点横向扩展的集群模式是非常适合非结构化数据存储的,利用多台存储设备分担存储负荷,利用元数据服务器定位存储信息,能够轻松应对数据文件的无序增长。不同类型应用场景对应的存储模式也是不相同的,一个产品往往很难做到完全适用于每个场景,特别现阶段大部分国内的厂商基于开源软件来搭建统一存储平台,我们也看到这些厂商在对应不同应用场景的时候,也会按不同存储模式,如块、文件、对象、大数
28、据的时候也提供专门的产品类别。联想凌拓在软件定义存储解决方案上,更多是从实际需求出发,在产品设计上并不追求大而全,而是有针对性的、差异化的设计,来满足不同业务场景。1011来源:SINA 2021 SDS Event 是超融合部署还是存算分离架构超融合在 IDC 统计中通常被分为软件定义存储的一类,这是因为超融合架构最初是以软件定义存储为核心的,将计算资源和存储资源绑定后,以一体机的方式交付,具有弹性伸缩的云计算服务和易部署、易管理的特征,这也是超融合一体机被称为云基础架构的原因之一,当然如果计算资源能够满足多业务应用的需求,超融合一体机也可以用来支持多个应用。但随着算力生命周期和数据生命周期
29、之间的差距越来越大,计算、存储资源需要灵活独立规划、维护,我们开始关注可靠性、经济高效。针对各类数据应用,如容器、大数据以及 AI 等平台,计算和存储资源可以按需独立扩展,避免计算存储一体化扩展带来的资源浪费,大幅提升 CPU 利用率,达到精准投资。当然,我们也看到超融合也在不断发展中,在超融合 2.0,甚至超融合 3.0 中,也逐渐强调存算分离架构,计算、存储独立扩展,HCI 也从 Hyper-Converged Infrastructure(超融合基础设施)升级为 Hybrid Cloud Infrastructure(混合云基础设施),实现了概念到实际架构的升华。1213联想凌拓作为国内
30、存储厂商的领导者之一,在存储阵列、软件定义存储、云计算、数据安全、数据智能等多个领域拥有多年的技术积累,结合 NetApp 和联想双品牌的影响力,我们启动联想凌拓软件定义存储(SDS)产品战略,不断加强在软件定义存储方面的投入,打造联想凌拓软件定义存储产品家族,实现更灵活地管理存储空间资源、物理设备资源等,为客户提供满足多样化存储需求的各类解决方案。联想凌拓的软件定义存储(SDS)产品战略,涵盖了大部分软件定义存储的场景,支持大容量、高性能、高可靠性和容量/性能无限横向扩展特性,满足大部分应用对存储的需求。联想凌拓软件定义存储产品家族虽然软件定义存储发展的方向存在一定的争议,但未来“面向应用”
31、的软件定义存储架构才是最终的形态,何为“面向应用”的软件定义存储?存储的发展历史不用赘述,从最初的大型机分离出了集中式存储体系,一开始的存算分离目标是明确的,存储作为外部的 IO 设备,能够满足摩尔定律带来的庞大运算 IO 处理要求,这是存储的使命,无论是最开始的集中式存储,或者是目前越来越流行的软件定义存储,只是表现形态上是不同的,所以各个存储厂商产品设计都会遵循这一目标,站在“存储”第一性原则的角度去设计“存储”。事实上存储在发展过程中也在逐渐适应前端业务应用的发展,例如,最开始只有 SAN 存储,因为当时应用类型主要是数据库,需要快速的响应 IO 的处理,这时候传统的存储厂商开始崛起,I
32、BM、HP、EMC(现在是 Dell/EMC)、Sun Microsystems、Hitachi 等公司凭借着计算机工业设计的优势成了 SAN 存储市场的主要玩家,引领了市场;随后,越来愈多的非结构化数据带来了文件存储的快速兴起,NetApp 以独特的 ONTAP 存储软件设计和简单易用成为这一领域的王者;时间来到了 2006 年云计算时代的起点,AWS 发布了亚马逊简易存储服务(S3),代表着云时代的存储新模式的到来。ChatGPT 和 AIGC 的火爆,掀起了新一轮科技创新的浪潮,随着 AI 变得更加普及,分析和存储的结合将会改变数据的存储方式,未来的 AI 系统会在从数据中学习,这就需要
33、一个计算和存储的平台,摄取“结构化和非结构化的数据图谱”,实时推理和不断强化学习,软件定义存储即将进入新一轮的发展阶段,计算型存储或许是一个新的增长点。新的技术会带来应用的变革同时,新的应用体系会反过来促进存储技术的发展,这种变革的速度会越来越快,对于上层应用来说,它决定采用以什么形态来存储数据,比如,多维数据结构更适合放在数据库表中,以结构化的方式存在,适合快速查找和使用,日常的照片和视频等非结构化数据适合存放在具有层次结构的文件目录中,而对于互联网带来的海量文件更适合放在简单管理的 S3 存储桶中。从应用的角度来选择最合适它的存储形态,这让我们在未来的存储发展中,应站在应用的角度来规划存储
34、,而面向应用的、模块化、基于软件定义的存储将会成为市场的主角。“应用感知存储”(Applications Aware Storage)不仅仅只是存储技术,更是一种存储技术发展的思路,内置智能的存储系统在了解应用程序和使用条件时,可以快速优化数据布局、缓存行为和服务质量(QoS)级别,为关键任务应用程序提供最佳的性能、容量和可靠性。就如同开启了金手指,自适应的方式以应对程序对存储系统的要求。联想凌拓软件定义存储解决方案第三方认证硬件平台DX8200D虚拟化存储DF 统一存储DX1100UDXS 3000DXS 5000DXN 2000DXN 2200 G2DXN 3000DXL 1200DXL
35、3600DXL 9600软件定义存储数据管理一体机分布式块存储分布式非结构化数据存储分布式对象存储CXN 2010H G2CXL2015H G2OS:麒麟 统信CPU:海光、飞腾、鲲鹏、申威麒麟海光分布式非结构化数据存储分布式对象存储分布式非结构化数据存储统一存储产品ONTAPSelect分布式存储一体机国产化分布式存储纯软件MagnaScale面向未来的一体化资源管理技术体系1415 产品体系分类:ThinkSystem DXN 分布式软件定义存储系列(以下简称 DXN):DXN 是由联想凌拓自主研发设计的一款具备高性能、高可靠、高扩展能力,能够满足客户需求的分布式存储系统,采用灵活的全对称
36、分布式架构,支持全局文件、对象共享、大数据等多种数据服务,让所有业务系统都可实现文件、对象的统一视图,支持全局海量数据的共享访问。ThinkSystem DXL 分布式对象存储系列(以下简称 DXL):联想凌拓 DXL 是专为混合多云体验打造的分布式对象存储,充分支持 S3 等行业标准对象 API,它可以在全球范围内的多达 16 个数据中心之间构建一个单一名称空间,以元数据驱动,为对象生命周期策略制定多个服务级别,可以轻松地连接混合云工作流,提供流畅的数据传输,以满足企业的业务需求。ThinkSystem DX1100U 系列(以下简称 DX1100U):基于 ONTAP Select 技术和
37、联想硬件平台的数据管理存储一体机,具备行业领先的数据管理,可靠性和数据安全性等特点,将服务器内部磁盘驱动器、NVMe、SSD 或 HDD 以及 HCI 和外部阵列存储转变为一个兼具灵活性和敏捷性的存储系统,该系统具有基于 NetApp ONTAP 数据管理软件的专用存储系统的许多优势。ThinkSystem DXS 分布式块存储系列(以下简称 DXS):联想凌拓 DXS 分布式存储管理系统内建全新联想 FutureStor 分布式存储软件,是一款可大规模横向扩展的云存储产品,能够帮助用户扩展存储规模,可以同时支持各种私有云、混合云、虚拟化、数据库事务处理等应用,适用随机小 IO 处理的场景。联
38、想凌拓国产化分布式存储:联想凌拓本地化国产化分布式存储系列,基于安全可靠的国产化软硬件生态和国产操作系统,集成联想凌拓分布式存储软件,具有安全可靠、开放生态的优势,适合为企业关键应用、海量文件共享、数据安全加固等应用提供存储和管理服务,广泛适用于政府、运营商、航空航天、金融、高端制造、教育、医疗等多个应用领域。MagnaScale 数据管理平台(以下简称 MagnaScale):DXN 和国产化分布式存储的核心软件,能够真正实现软硬件解耦,能为客户提供灵活的采购方式,有效的降低采购成本,并且通过标准化的服务,可以选择经过验证的第三方服务器。DXN:自主研发分布式软件定义存储 海量非数据化数据的
39、理想解决方案联想凌拓 DXN 海量分布式存储系统内建 MagnaScale 分布式存储系统软件。该系统软件基于云原生系统要求设计和开发,保证了 DXN 全系列具有高性能,高可靠性,高可扩展性和强大的生态适应能力,同时兼顾性能和容量灵活配置,按需部署。采用了全对称式架构的 DXN 可实现在线扩容保障业务持续稳定运行,性能及空间随集群扩容线性增长,并支持工业标准接口为用户业务提供卓越底层服务。1617联想凌拓选择分布式存储这条赛道是经过深思熟虑的。首先,我们看到的是移动互联网、5G 的兴起,非结构化数据指数化增长,企业 CIO 们越来越多地使用分布式横向扩展文件系统产品来取代纵向扩展 NAS 设备
40、系统,以获得容量和性能线性扩展的益处。其次,企业正在为非结构化数据指数级增长做准备,并寻求更好的数据洞察,以及与云存储的集成,以实现长期数据生命周期管理。其三,视频类、智能制造、智慧医疗等大数据分析、人工智能(AI)和机器学习(ML)应用成为分布式存储的典型用例。联想凌拓 DXN 分布式存储产品可以为生产的业务系统、数据管理系统、数据分析系统提供统一的非结构化存储和管理平台,同时节点内部利用分布式技术将 NVMe、SSD、HDD 等存储介质组织起来,构建全对称结构的分布式存储池,为用户和上层应用提供丰富的基于标准接口协议,前端的业务系统通过 SMB/NFS/FTP/POSIX/S3/HDFS
41、等协议直接进行文件的读写访问。元数据池热数据池DXN 分布式非结构化存储硬件节点层管理平台存储内部网络业务接入网络智慧城市视频监控银行票据影像广电媒体媒资影音智能制造图纸文件智慧医疗PACS 影像通用数据池10GbE/25GbE/40GbE/100GbE10GbE/25GbE/40GbE/100GbESMB/NFS/FTP/POSIX/HDFSS3大容量兼顾性能和容量全对等线性扩展云原生源于云架构的数据管理帮助 DXN实现高效超大规模文件数据访问高性能文件索引数据库加速数据存取智能分片技术均衡负载 分布式高并发安全可靠端到端快速故障转移和恢复端到端数据保护存储单元单节点支持1.6PB 容量集群
42、规模最大 128 个集群,统一管理节点数量单集群支持4096 个存储节点统一管理统一管理超过 5000 万块硬盘,容量超过 EB 级 DXN 产品的发展历程与架构说明在 2019 年联想凌拓成立之际,联想凌拓就定下了双品牌战略,一方面为中国企业提供 NetApp品牌的全线产品和解决方案,另一方面也提供联想品牌的优秀的产品组合,但联想凌拓更重要的使命是思考如何将两者的优势进行融合,进行本地化探索,为中国企业加速走向现代化数据管理体系贡献力量,联想凌拓一直坚持技术创新,稳健低调,2021 年,联想凌拓自主研发的 DXN 分布式存储应运而生。2019.02联想凌拓成立,双品牌策略打造自研分布式存储品
43、牌2021.06历经 2 年打磨全对称分布式稳定可靠、海量扩展2021.10K8S 适配OpenStack 适配麒麟适配5U84 JBOD2022.08S3 对象功能增强支持 WORMNVMe 缓存支持全闪2022.03扩展 4096 节点支持 FTP、S3EC 折叠SSD 高速缓存2022.12远程容灾复制文件、对象性能增强智能负载均衡策略第三方国家实验室认证2023.04支持 Infiniband 网络支持 HDFS 接口快照策略和回滚V1.0V1.0SP1V2.1V2.0V3.0V3.1V3.2 技术规格系统架构系统特性应用场景系统扩展性数据重构时间副本及纠删码支持协议访问控制高级功能存
44、储网络数据盘单盘容量认证证书全对称分布式架构分布式存储系统,元数据索引数据库非结构化文件、大数据、对象等存储应用场景存储节点,最小 3 节点起,最大支持 4096 节点扩展;每节点最大支持 100 盘位;支持统一管理最大集群数量 128 个 为什么选择 DXN全对称架构,线性扩展更高效在架构方面,DXN 采用了全对称分布式的扩展架构,又将云计算架构中的数据管理思维融入其中,引入元数据索引数据库核心技术。这种云原生架构与传统软件定义存储设计理念不同,使得 DXN集群的扩展性极强,集群规模的增大,所能提供的性能和容量线性增长;而元数据索引数据库的作用就是在集群规模极大的情况下,依然能保持极高的文件
45、检索与读写能力,并支持更深的目录路径。DXN 每个节点既是数据的存储节点,也是元数据管理、集群管理和接口作为一个服务在所有存储节点上的云节点。进而不再需要配置单独的元数据管理服务器,也不会存在元数据管理服务器性能瓶颈问题,因此可以弹性扩展至数成百上千个集群节点,实现超大的存储规模。全方位数据保护技术,安全更可靠安全可靠是存储系统提供数据管理服务的技术基础,DXN 通过事前主动防御(存储亚健康检测、数据校验)、事中自动处理(副本、EC 自动重构)、事后快速兜底(基于嵌套式快照的多层级灵活数据恢复和远程容灾)的闭环数据保护架构来应对各种可能的风险。在恢复时 DXN 采用了热备空间概念,将原本一块磁
46、盘重构数据的压力均摊到多磁盘上,速度可提升至 1T/30 分钟。另一方面,由于采用了无中心化设计,所有存储节点均可承载业务系统,即使分布式存储服务器故障,存储系统依然稳定可用,可靠性更优。考虑到中国是一个区域灾难多发的国家,DXN 也支持异地远程复制,从而将意外故障停机时间和恢复时间降到最低,提高了业务系统的可用性及可靠性,与原有系统高可用形成双重保护措施。NAS 文件服务S3 对象服务元数据服务集群管理服务集群管理服务集群管理服务元数据服务元数据服务S3 对象服务S3 对象服务NAS 文件服务NAS 文件服务Node 1Node 2Node 3SSDSSDSSDSSDSSDSSD18193
47、节点起步,轻松扩展到 EB 级联想凌拓 DXN 采用 Scale-out 扩展架构,可实现超大集群规模的部署,从 3 节点存储集群起步,可以小规模起步构建,按需投资,通过在线可轻松实现数千节点扩展。存储容量可实现一个集群EB 级数据空间。由于是全对称分布式架构,每一个存储节点都可以提供独立的性能支撑,在高并发的数据处理中,可以实现更高的存储性能,更高的带宽吞吐和 IOPS,有效解决海量数据高扩展和高性能的存储需求。大小文件优化,适合不同压力场景传统的存储面对的应用主要是数据库、文件和流媒体这类传统应用。而今天,在新兴技术驱动下,存储主要面对的是 Cloud、Big Data 和 AI 这些大规
48、模数据应用场景,这些数据种类繁多、大小不一,不仅包括海量的大文件(大于 1MB),也包括海量的小文件(小于 1MB)。特别是小文件的数量将达到千万级、亿级甚至十亿、百亿级。而大文件、小文件的顺序、随机并发读写需求对分布式存储要求也不同。DXN 在设计之初就考虑了大文件和小文件所带来的影响,在处理大文件时,前端通过数据分片配合元数据索引数据库的方式快速把文件片打散到各个节点上,因为采用的是经过优化的 Key-Value 数据库,元数据存储为键值对集合。键作为唯一标识符,值作为对应数据分片的元数据,所以整个架构能提供极高的并发读写性能。在小文件的处理上 DXN 也推出了自己的独门绝技,来帮助用户应
49、对典型应用场景下的存储挑战。这其中包括:面向全局存储资源的条带化,确保应用数据的并发读写;小文件预读取功能,有效降低小文件写入磁盘次数、减轻写数据压力;闪存加速技术,读写小文件时存储节点的 SSD 作为缓存空间,能有效提高读命中率、缩短读 I/O 路径等,我们将访问频度高的随机小文件存入到 SSD 中,再次读取时直接访问 SSD 缓存,非常适合随机、小块数据文件、读密集型的应用。2021业务连续性数据快照与保护数据校验与恢复本地数据保护容灾解决方案Disaster recovery solutions嵌套快照与 WORMSnapshot WORM应对静默损坏Silent Data Corrup
50、tion数据副本与纠删码Replication Erasure code存储节点 1HDDSSD 缓存存储节点 2应用服务器存储节点 N2223数据自动均衡,无热点瓶颈分布式存储是一个集群,因此节点间数据均匀分布是考验分布式存储能力重要的一个指标,如果数据文件分配不够均衡,这必然会带来某些存储节点“过热”的数据倾斜现象,发生了数据倾斜,那么保存了大量数据,或者是保存了热点数据的存储节点的处理压力就会增大,速度可能变慢,甚至还可能会引起这个节点的资源耗尽,从而影响整个集群的性能,如同一个水桶最短的一块木板决定了存储容量,分布式存储系统要考虑多种情况发生的可能,才能够从容面对不同的风险。但在整个系
51、统设计中要充分考虑怎样保证新加入的节点,不会因短期负载压力过大而崩塌?当系统发现当前新加入了一台存储节点后,显然它的资源使用率是最低的,那么有可能所有的写流量都路由到这台存储节点来,那就可能造成这台新节点短期负载过大。因此,DXN 在资源分配的时候,充分考虑了预热时间,在一个时间段内,缓慢地将写压力路由过来,直到达成新的均衡。DXN 的内部数据分布算法会均匀的把数据分布到所有的节点上,内部的自动负载均衡策略确保数据均匀分布于各节点,消除元数据访问瓶颈,消除了数据倾斜,保障规模扩展场景下的系统性能。当存储性能或者容量资源不够时,均可以通过添加硬件资源来提升存储集群的相应资源,当在线动态移除节点或
52、磁盘时,数据自动在其他节点/磁盘上生成副本数据,系统自动迁移和重新平衡存储资源。软硬解耦,性价比更高DXN 可以做到软硬件解耦,让用户的选择更加灵活,对追求性价比的客户是个不错的选择。软件定义存储追求的“开放”和“分布式”是区别于传统存储的两大特征。开放意味着接口标准化、软硬解耦,产品更加自主可控。它保证了更加广泛兼容适配支持,避免锁定风险。为了更好的服务用户,减少第三方硬件的兼容风险,联想凌拓也针对第三方的硬件平台提供了标准的认证服务,第三方机构或者用户自己就可以通过自动化工具和手册完成对非联想品牌硬件兼容适配,能有效帮客户规避第三方硬件的兼容适配的风险。操作简单易用,学习成本低在用户体验方
53、面,DXN 管控面开发坚持“简单易用”和“面向用户设计”的原则,最大限度地降低用户的学习和使用成本,针对在分布式复杂环境下资源组的资源分配,很容易出现部分资源不足部分资源过剩的情况,DXN 也提供了非常友好的可视化界面,用户通过轻点鼠标和简单拖放,就可以迅速完成操作。在面对一些对分布式存储并不熟悉的用户,联想凌拓设计了一种独特的用户向导方式,在每一步中,它会询问用户一些简单的问题。最后,根据用户的输入信息,它将帮助用户完成复杂的任务。增加数据可视化的内容图形化配置,检索、搜索配置关注用户体验为中心强化感知对象逻辑关系图帮助引导和提示减少任务链路以对象为中心降低产品学习成本一致性(设计规范)减少
54、配置内容初始化设置向导缩短操作路径提高产品操作效率 面向不同行业应用场景DXN 作为一款可大规模横向扩展的智能分布式存储产品,主要面向用户的非结构化数据场景,它既具备云基础架构的弹性按需服务能力、又是满足企业级关键业务需求的全自研存储系统。典型应用场景:金融影像平台存储在金融银行、保险、证券行业中需要存储和管理大量的客户资料扫描件、照片、视频、票据、合同等非结构化数据,这些文件数量巨大,目前基本采用存储级别而非文件级别的备份,这种方式不能规避逻辑错误,而且这些数据还需要在线归档,满足监管方随机读取的需求,利用 DXN 分布式非结构化存储能有效的存储和管理用户数据。医疗 PACS 影像平台存储P
55、ACS 影像检查业务 24 小时持续运行,系统压力大,需要多文件并行处理,而且医院存储数据的 80%数据量来自 PACS,设备越先进,检查生成的数据越多。三甲医院 PACS 影像数据量增加近 50TB/年,影像数据合规要求长期保存 15 30 年;DXN 支持并发读写能力,可以更好地满足大中型医院不同科室同时读取,以及多种医疗设备同时存储 PACS 文件所需的高性能需求,同时,采用扩展性和高密容量设计,节约空间及能耗,并且 DXN 软件针对 PACS 应用系统出版了 PACS 专业版存储,优化了 Samba 单线程下小文件的处理效率,轻松应对海量影像文件增长。视频云存储空间智慧城市、平安城市、
56、天网工程、雪亮工程等、海量视频监控正处于智能化升级的阶段,除了大量的视频数据外,还有图片、音频等小文件数据,DXN 满足了能管理海量的图片、音频小文件及视频大文件等,又能够满足频繁的存、算、检需求,存储容量远超 NAS/SAN 存储系统,极大降低管理维护需求。另外,广电媒资、影视制作、视频网站等领域,对存储设备提出了大容量、高读写性能、高可靠性、低延时及可扩展性等需求,针对这样大规模视频数据应用场景,DXN 作为后端存储系统有力支撑这些应用场景。2425物联网存储物联网是实施智能制造的重要载体。在 IOT 环境中,数据存储是基础,DXN 为智能制造提供图像、视频、文件等非结构化数据的采集、存储
57、、传输、显示和处理,以支撑工业互联网中各种系统高可靠性、高稳定性运行。DXN 的全对称式架构的性能可随节点数量线性增长,通过图形界面对数据资源进行智能化管理,智能监控预警,节省运维成本,让数据在合适的时间存储在合适的介质中,兼顾性能与成本的平衡,实现低成本长期留存。地理测绘、卫星遥感应用存储我国载人航天、北斗、探月等重大工程相继实施,国家卫星观测体系持续完善,中国卫星技术已进入全面发展阶段。民用空间分辨率已达分米级别,瓦片化影像数据技术使影像数据量逐渐从 GB级向 TB 级、PB 级发展。DXN 的超大容量,线性扩展的能力,灵活的接口方式单一命名空间下文件数量可达百亿级,存储空间可扩展到 EB
58、 级的能力帮助用户更好存储和管理地理位置和遥感数据。在线教育存储平台在线教育平台可以实现教学资源共享,解决了教育水平地区差异大和教学资源分布不均的问题,同时可以为学生和社会学习爱好者提供免费的学习平台,因此,对于如何安全、持久与低成本的存储影音与文档将成为一个新的挑战;同时,由于教育机构所安排的教学课程与提供服务的时间往往较为集中,并且是已经预置安排好的,所以用户在同一时间上的集中访问同样对存储构成相当大的压力,DXN 智能小文件优化、SSD 缓存加速、负载均衡等多种技术保障对数据的流畅访问,内部多种数据保护策略,高安全易分享。工业制造存储中国于 2015 年 5 月出台“中国制造 2025”
59、,大力推进由制造大国向制造强国的转变。在制造业数字化转型的大潮之中,企业的核心价值是数据,通过对数据的全面感知、收集、分析、共享,为企业管理者和参与者呈现出制造业价值链的全新视角。传统制造业突破现有生产方式与制造模式,需要对消费需求所产生的海量数据和信息进行数据处理与挖掘,同时,通过及时收集、处理和分析,进而优化、完善现有生产流程。DXN 分布式存储提供命名空间统一的存储资源池,存储容量和性能随存储集群规模线性增长,并通过智能搜索引擎精准检索,实时响应业务对制造业数据使用请求。海量数据备份归档在金融、运营商和政务云等领域实践中,海量备份归档主要面向 PB 到百 PB 级数据规模的价值数据的快速
60、备份恢复、长期或者永久保存;DXN 提供安全、可靠、经济的温冷数据生命周期管理,其性能和可靠性方面远超传统备份架构产品,现在有效的备份场景是通过 S3 接口,实现了海量数据备份、海量电子文件在线归档、海量电子文件离线归档。大数据平台存储Hadoop 在 1.X 时 代,资 源 管 理 和 数 据 处 理 都 是 使 用 MapReduce,HDFS 只 支 持 单NameNode 和 3 副本;2.X 时代,引入了 Yarn 组件进行资源管理,支持主备 NameNode;到了 3.X,HDFS 开始支持 EC(纠删码)方式来降低过多空间资源的浪费,但 HDFS 的 EC 性能不佳,并且限制较多
61、,比如:数据的访问均需要访问主 NameNode,获取数据的元数据信息后,才能访问对应的 DataNode 进行数据读写,因此主 NameNode 会成为性能瓶颈和可靠性瓶颈,另一方面,单 NameNode 受内存影响,最大仅能支持 1.5 亿左右的文件,在 EC 机制下管理的数据块更多,这也限制了单 HDFS 集群规模。DXN 采用了全对称分布式架构,支持 HDFS 接口,支持 HDFS 语义,如 Append,truncate,hflush 等,将 Hadoop 集群进行存算分离设计,数据冷热分层,最新最热的数据在上层Hadoop 集群本地盘上,温冷数据放在 DXN 上,弹性的 EC 完美
62、的解决了 HDFS 兼容性和存储利用率问题,成为大数据存算分离方案的理想数据底座。典型案例分析医疗行业 某市第二人民医院 PACS 系统客户挑战:随着医院门诊量的爆发式增长,放射科等科室新增了大量影像采集设备,PACS 存储了大量的非结构化数据,原有的存储系统面临如下挑战:数据增长快,数据量大:每天的门诊量约 2000 人次规模,影像文件每月新增数量接近 300 万,每年增长量达到 3000 万左右。业务系统多,容量增长快:HIS,LIS,PACS 等等多套系统文件数量已经超 2 亿,容量空间高达 PB 级,且文件保存期限不低于 15 年,现有存储无法满足。访问性能要求高:大批采集设备产生的海
63、量图片要经过 PACS 的并发处理与存储,单线程峰值要求写入 60MB/s。考虑到并行处理能力,总带宽要求 2.5GB/s。信息集中管理:其他科室的数据存储在各科室工作站,医院的 IT 人员又少,HIS,LIS,PACS等系统信息无法集中管理和共享。解决方案:客户选择使用联想凌拓的 DXN 替代原有存储系统,简化存储架构,数据统一管理,提升存储访问性能。DXN 存储系统简化了 PACS 系统的存储架构,生产系统将文件存储到一个容量大、易扩展的存储池,各科室的医生可以很方便的共享数据,也实现了存储设备和数据的统一管理和运维监控。Doctor workstationLAN客户端HIS 系统LIS
64、系统其他应用PACS 系统DICOMMedical equipment客户收益:统一管理,简化运维:医院的专业技术人员少,DXN 提供简单易懂的操作平台,和灵活方便的可视化监控预警,可以大大减少客户的运维成本。海量存储,方便扩展:DXN 设计就是为了面向海量文件的存储,无需提前规划,存储性能随容量增加而线性提升。性能优化,实时调阅:DXN 采用元数据索引技术,SSD 缓存加速技术,SMB 多线程技术,优化了 PACS 影像文件存储性能,PACS 影像调阅速度提升了一倍,性能提升一倍。DXL:海量数据对象文件管理专家2627 基于 StorageGRID 技术的联想 DXL 解决方案NetApp
65、 StorageGRID 软件定义对象存储在全球对象存储范围内一直是行业的领导者,无论IDC 还是 Gartner 都给与了较高的评价,联想凌拓将 StorageGRID 软件与联想的ThinkSystem 服务器硬件完美结合在一起打造了联想凌拓 DXL 系列分布式对象存储,为中国用户打造全球知名的企业级对象存储平台。经过认证、预先配置和全面优化的 DXL 设备可支持管理员完成快速部署,为要求苛刻的工作负载打造理想解决方案。IDC 认为 NetApp StorageGRID 是一款易部署、易管理、灵活弹性、易于扩充、效率极高的混合云软件定义对象储存平台,其混合云平台服务可让各租户设定自己的 S
66、3 存储,以充分运用外部服务项目,并便于将 StorageGRID 功能延伸至公有云。StorageGRID 具备由策略驱动的智能型数据管理与整合功能,是非常强大的解决方案,适合数据中心遍布世界各地的企业使用,以跟上日渐加快的数字化脚步。IDC 基础架构研究小组 Ritu Jyoti 和 Amita PotnisNetApp 收购 BycastStorageGRID Webscale 10.0:S3 和 1000 亿个对象全局命名空间StorageGRID Webscale 10.1:分层 EC、SG5600 设备StorageGRID Webscale 10.2:Swift 和 NAS 网桥
67、StorageGRID Webscale 10.3:简化安装方式、全新用户界面、S3 版本控制StorageGRID Webscale 10.4:裸机、MTT、WORM、NAS 网桥性能 StorageGRID Webscale 11.3;StorageGRID on Lenovo ServerStorageGRID 11.4:高级 QoS,alerting 功能增强,Lenovo DXL 1.1Storage GRID 11.6:高级 QoS,ILM 功能增强,S3 Object 锁,集群可扩展 2000 亿个对象20001920202022IDC
68、:2021 年对象存储市场 LeaderStorageGRID:经过历史验证的对象存储平台Gartner:对象存储关键能力评分 Top3真正的 Multi Site 全站动态数据保护策略灵活的 ILM 信息生命周期管理高性能、高可用、高数据持久性数据访问和管理跨不同地理位置并可按地理位置选择大规模智能化元数据驱动型对象生命周期策略将近二十年生产环境部署历史2829StorageGRID 是一个久经验证的对象存储软件解决方案,设计用于管理 PB 级、全球分布的存储平台,这些存储库包含企业和服务提供商的图像、视频和记录。StorageGRID 实现了智能的数据管理和安全的内容保留。它通过一个具有内
69、置安全性的全局策略引擎来优化数据存放、元数据管理和效率,该引擎管理数据的存储、放置、保护和检索的方式。此外,使用数字指纹和加密等技术防止内容受到篡改;该解决方案被设计为允许灵活进行部署配置,以满足全球多站点组织的不同需要。支持用户和前端应用系统通过标准的 S3、Swift 以及 HTTP RESTful 等接口进行访问;用户可以自定义元数据信息,并可通过元数据检索并访问对象,而不用关心该对象的具体物理位置。对于性能敏感型对象存储工作负载,DXL1200P 和 DXL9600P 型号可提供适合海量较小文件的高性能低延迟读写。对于容量导向型对象存储工作负载,DXL9600S 和 DXL9600P
70、型号可提供高密度大容量的数据存储。兼具计算和存储功能,易于部署和维护。更高的密度可节省更多数据中心空间和能源。DXL 硬件设备本地采用多盘校验模式,单节点可同时承受多颗硬盘故障而无需纠删码介入,保障业务系统性能和连续性可用以及数据安全。同时 DXL 提供节点级别纠删码与池技术,基于分层纠删码功能构建对象存储可在节点级别提供数据保护。在此功能基础之上,在节点和站点之间利用地理分布式纠删码功能可提供地理保护、效率提升和数据持久性。借助数据分层纠删码,您可以创建拥有多个粒度级别的策略驱动型数据保护方案,选择组合使用完整副本和经过纠删码的副本,在满足 SLA 的同时大幅节省成本。利用池技术处理磁盘故障
71、,系统性能丝毫不会受到影响,跨站点修复对象的需求大幅减少,因而在提供稳定一致性能的同时,还可以继续提供出色的可用性和可靠性。遵循活动元数据驱动型策略,借助高级 N 向复制和分布式纠删码技术,实现对象的可用性、持久性和跨地域分布。节点类型机架高度处理器缓存存储SSD网络存储节点2U2 颗第三代英特尔 至强可扩展处理器S:64GB768GBP:128GB768GBS:12 x 3.5 寸 7.2k rpm 磁盘P:10 x 3.5 寸 7.2k rpm 磁盘P:2 X 1.92/3.84 TB SSD4 x 10/25 Gb 以太网端口2 x 1 Gb 以太网管理端口存储节点7U2 颗第三代英特尔
72、 至强可扩展处理器S:128GB768GBP:192GB768GBS:96 x 3.5 寸 7.2k rpm 磁盘P:94 x 3.5 寸 7.2k rpm 磁盘P:2 X 1.92/3.84 TB SSD4 x 10/25 Gb 以太网端口2 x 1 Gb 以太网管理端口存储节点4U2 颗第三代英特尔 至强可扩展处理器S:64GB512GBP:128GB512GBS:36 x 3.5 寸 7.2k rpm 磁盘P:34 x 3.5 寸 7.2k rpm 磁盘P:2 X 1.92/3.84 TB SSD4 x 10/25 Gb 以太网端口2 x 1 Gb 以太网管理端口管理/负载均衡节点1U1
73、/2 颗第三代英特尔 至强可扩展处理器192GB768GBN/A4 x 10/25 Gb 以太网端口2 x 1 Gb 以太网管理端口 规格DXL 1200S/PDXL 9600S/PDXL3600S/PDXL1000DXL 系列对象存储系为大规模的非结构化数据提供安全、持久的存储。此外,集成数据生命周期管理策略优化数据位置。通过将存储内容存放在正确的位置、时间及存储层,从而减少成本、时间和数据量。联想凌拓 DXL 典型应用场景与文件系统不同的是,对象存储将文件及其元数据分组为对象,不同媒体资产管理系统、文件传输系统及其他生产和分发应用程序可以协调一致地访问这些对象。DXL系列对象存储提供智能的
74、策略驱动型数据管理。支持在多个地区之间优化持久性、保护、性能甚至物理放置,同时对数据进行管理,这对于满足业务需求至关重要,而且还能降低成本。它适用于包括 Web 应用程序、影像内容、数据湖以及备份和归档等众多工作负载,在行业中的应用场景包含:利用策略驱动信息生命周期管理,在合适的时间和合适的位置提供数据存储服务。利用元数据驱动型策略优化数据可用性、性能、地区分布、留存、保护和优化存储成本,并随着数据业务价值的不断变化对其进行动态调整。借助 DXL 的智能策略引擎,用户可以选择跨多个站点对其对象实施纠删码以实现地区故障恢复能力,或者选择将对象复制到远程站点以最大限度地降低 WAN 延迟和成本。当
75、内容变得陈旧时,策略可以自动将内容迁移到磁带或云。这项功能避免了手动移动或删除数千或数百万文件,而且还可以提高媒体存储库的经济效益。提高效率、持久性和灵活性。借助 DXL 的分层纠删码功能,可以在不影响持久性的情况下降低成本。利用节点级编码防范磁盘驱动器故障,快速重建丢失的数据段,并利用地理分布式纠删码功能防止站点级别灾难。您可以将复制与地理分布编码相结合,在不同的数据集之间或在对象的生命周期内平衡性能需求并节省成本。满足防篡改数据保留要求。DXL 提供了许多有助于履行法规义务的功能。存储租户可按分段为对象配置 WORM 保留和诉讼保留。我们可以对 DXL 进行配置,利用基于软件的加密和内置审
76、计记录能确保数据安全。专为无中断运行设计。DXL 为全球随时随地访问数据,保证无中断运行奠定了坚实的基础。您可以对配置进行设计,使站点在出现一个或同时出现多个故障,甚至整个站点发生故障和发生区域性灾难时都能恢复过来。DXL 适合在全球各地拥有众多站点的单个数据中心或多个数据中心进行部署。久经验证的对象存储软件。对象存储必须提供用于大规模扩展和长期保留的解决方案。鉴于 StorageGRID 软件和 NetApp 存储的骄人纪录,我们完全可以相信,StorageGRID 为 Web 数据存储库、数据归档和媒体存储库奠定了坚实可靠的基础。降低复杂程度。借助软件定义的存储,您可以使用虚拟机作为 DX
77、L 节点、经过优化的硬件设备以及 Docker 容器进行部署,还可以通过组合方式进行部署。无论采取哪种部署方式,设计、部署和管理 DXL 的流程都是经过精简的管理流程。支持混合云环境。DXL 提供行业领先的混合云集成以及用户控制的平台服务。存储租户可以通过配置将特定对象镜像到 S3 兼容的公共云。通过将内部分段中的 S3 事件通 Amazon Simple Notification Service(SNS)相集成,形成混合云工作流。通过将对象元数据流式传输到位于内部或公共云中的外部 Elasticsearch 服务,利用元数据搜索和分析实现更多价值。其主要优势包括:为对象文件提供分布式数据存储
78、。为对象(Amazon S3、OpenStack Swift)应用程序提供易于使用且可大规模扩展的全球分布式非结构化数据存储。实现全局数据监管。通过跨地理位置复制和分层纠删编码、支持“一次写入,多次读取”(WORM)保留、访问控制策略、加密和审计记录,保护数据并遵守法规要求。支持混合云数据管道,支持用户利用公共云处理,转换和分析对象与元数据,同时在内部对象存储中确保数据的安全。票据系统/信贷系统 后督系统 双录系统 无纸化办公 归档备份系统 呼叫中心/远程银行 见证开户系统 AI/大数据/数据仓库相关 媒资 点播 推流 新媒体非结构化数据存储 海量视频数据管理系统 卡口海量照片管理系统 人脸识
79、别系统 人证识别管理系统 人口信息备份系统金融广电媒资/互联网安防交通教育3031 远程教育 基于校园的云盘应用 大规模资源管理及共享场景 生命/物理/环境等重点学 科等 HPC/大数据/非结构 化数据仓储场景 监控安防,IOT 病案翻拍/手术视频/电子 病历/化验记录/医疗记录/医生论文等影像归档备份 PACS 区域云医疗 航空、卫星影像处理系统 北斗位置数据服务平台 地图公共服务平台 数字外业调绘平台 国家基础测绘数据备份 企业云网盘系统 企业数据备份系统 企业视频监控系统 制造业模型制作库 用户工档数据/邮件归档AI/大数据相关数据卸载医疗GIS制造业/大企业运营商/云服务 人脸识别/身
80、份认证/智慧 城市 平安城市/雪亮工程 客服语音 数据归档云,个人云盘 话费详单 为什么选择 DXLDXL 核心软件 NetApp StorageGRID 做为多年来的对象存储外部市场领导者,在包括应用分析、云存储、混合云数据底座、数据归档、数据备份等 5 大对象存储场景关键能力 Gartner 评测排名前三。IDC:2019 年对象存储市场报告Gartner:对象存储关键能力调研“NetApp 的优势在于其核心工程实力和在非结构化数据领域的丰富经验。NetApp 在跨市场细分市场推出新产品以及与超大规模云存储服务提供商 Microsoft Azure 和 Amazon AWS合作方面取得了长
81、足的进步。该公司认识到市场需求的战略远景以及在组织内部推动有效变革以适应其远景的意愿是值得称赞的。”真正的 Multi Site 全站点动态数据保护策略,多 AZ 部署。现阶段市场中常见的 Multi Site 只能做到跨站点的 EC,或者主站读写、副站只读;而 DXL 可以做到一个对象(Object)在多个站点有自己的数据副本,并且制订独立的数据保护策略,且全站点可读可写。灵活的 ILM 信息生命周期管理,提高业务性能,降本增效。DXL 能够提供基于不同租户、用户、文件类型的多种数据存储策略,且策略随时可以进行调整;支持单一对象基于时间轴的不同策略调整,直至对象生命周期结束,从 bucket
82、 中删除。提供从DXL 到 AWS S3 或 Azure Blob 的数据云端归档。DXL 的信息生命周期管理是一个以存储节点为基础的服务,它通过安全性,可用性和性能数据等基于策略实现数据的管理。从更高层面上看,信息生命周期决定以下几个因素:地理位置 文件的位置 存储分类 使用的存储类型 复制 数据的副本当对象数据进入 DXL 中,对象元数据将记录到控制节点的数据库中,控制节点开始检查元数据,并开始对这个对象数据应用预定义的 ILM 策略。ILM 策略将定义此对象数据存储在何处,需要几份副本,将使用那个存储层,这个对象在其生命周期的不同阶段/不同位置将保留多久。DXL 基于 Web 管理界面提
83、供了一个 ILM 策略的编辑器来查看,配置和修改 ILM 的业务规则。我们建议只有经过专业培训的人员可以修改现有的规则,以确保不会对现有的生产系统产生影响。例如,如果没有仔细的规划,将副本数从 2 修改为 3 将导致数据在整个集群内部重新平衡,因此会对存储容量和网络流量产生较大的影响。通过正确规划 ILM 的业务规则,确保系统整体性能的提高,实现正确的数据在正确的时间被存储在正确的位置。采用 FabricPool 技术实现主存储向云端的分层,通过自动化数据流动降低总体有用成本。3233 FabricPool+DXL(StorageGRID)为您释放宝贵闪存空间挑战与解决方案FabricPool
84、+DXL(StorageGRID)功能的设计可以有效将 FAS/DM 集中式存储与 DXL 进行整合,通过将主存储中的数据根据数据热度自动流动至 DXL 层的方式实现数据的生命周期管理和降低总体拥有成本。数字化时代的今天大量企业级应用需要搭配 All Flash 来取得所需的高性能,但是如果不活跃的数据也使用这些系统,那么成本将变得极为高昂。因此,将冷资料数据通过 FabricPool 分层储存至低成本的软件定义储存环境,则不止省下可观成本,还能释放出高性能存储空间供更重要的应用来使用。FabricPool 是 NetApp 的一项核心功能,可根据存取模式在高性能的本地层(Aggregate)
85、和云端层之间自动迁移数据。分层存储可以释放高成本的本地存储资源,将其用于热数据的存放,同时将冷数据储存在云端的低成本储存空间,以供随时使用。FabricPool 能够持续监控数据存取,在各层之间顺畅移动数据,以实现出色的性能,并最大化节省成本。All FlashCloud(Public or Private)Performance Workloadson High-Performance Flash AggregatesInactive/Cold DataMoves to the Cloud2-4X4KB to 256KB ReadPerformanceImprovement30%LowerS
86、calableHybrid cloudPolicy-drivenFlexibleMulit-tenant主要优势 自动分层储存代表您不用再猜测哪些工作负载可从 Flash 效能中获得最大收益,因为 FabricPool 会分析找出冷数据并分层,而且对应用而言,数据都保持透明可见的状态。使用资料的应用不会知道资料经过分层化储存,因此不需要对应用进行任何变更。分层化储存是全自动功能,并不需要持续管理。为避免耗尽主存储设备资源,分层存储原则会在 All Flash 层即将满载时,自动开始将数据分层储存至冷存储层。非使用中的数据可能占整体存储空间高达 80,因此,对这些数据进行分层化储存可以大幅降低总
87、体拥有成本。目前全球分层存储所生产数据量早已达到数百 PB,足见这是一套拥有妥善支持的存储解决方案,值得您的信赖。S3 Data lakes in AI/ML/Analytics挑战与解决方案企业希望从他们的数据中提取尽可能多的价值,同时最大限度地减少复杂的数据管道。传统的数据仓库可能导致数据孤岛、供应商锁定、不一致的真实来源和混乱的流程等等。数据管理员的任务是构建现代数据湖,StorageGRID 能帮助企业应对面向未来、可扩展且高效的数据基础架构的挑战。主要优势 StorageGRID 让您可以控制数据管理,推动有影响力的分析和商业智能(BI),同时确保正确放置数据以实现价值最大化。Sto
88、rageGRID 信息生命周期管理(ILM)策略允许对数据保留多长时间、数据所在的位置、何时分层到低成本对象存储等进行完全精细的控制。简单且开放的数据湖使您能够有效且有影响力地使用企业数据。借助 SQL 查询引擎,可以在 StorageGRID 上就地查询数据,用户因此可以在整个数据湖内访问企业所以的数据。StorageGRID 提供海量 S3 对象存储和动态数据管理,使您能够在本地与公有云一起运行下一代工作流,行业领先的数据管理策略引擎可帮助您优化性能和持久性并遵守数据合规要求。3435 边缘及分支机构数据管理的明智选择ONTAP 数据管理软件支持高速闪存、低成本磁盘介质和基于云的对象存储等
89、存储配置,为通过块或文件访问协议读写数据的应用,为用户提供统一存储。ONTAP 实施可在 FAS、DM 或 AFF 设备、硬件服务器(ONTAP Select)以及私有云、公有云或混合云(NetApp 私有存储或 Cloud Volumes ONTAP)上运行。专业化实施可提供高效的融合基础架构(FlexPod Datacenter)并支持访问第三方存储阵列(FlexArray 虚拟化)。这些实施共同构成 Data Fabric 的基本框架,并采用一种通用的软件定义方法来管理数据且支持跨平台快速高效地进行复制。Data Fabric 架构ONTAP Select 是 ONTAP 的纯软件版本,
90、可以作为虚拟机软件部署在管理程序主机上。它是对主流的 FAS 和 AFF ONTAP 产品套件以及云存储卷 ONTAP 等其他纯软件选项的补充。DX1100U 是结合了 ONTAP Select 以及联想商用硬件平台的一体化软件定义存储产品,为了方便用户的快速部署和使用、避免多供应商之间的兼容风险,联想凌拓于 2020 年 4 月发布了ONTAP Select 数据管理存储一体机 DX1100U。ONTAP Select 可以在运行 VMware ESXi 管理程序的各种服务器上,可让您在数据中心中快速启动存储资源,提供您构建灵活、可扩展的私有云基础设施所需的敏捷性。ONTAP存储CloudM
91、anagerSnapMirror复制ONTAP1ONTAPSelect2支持的操作系统UNIXWindowsLinux虚拟化支持的协议光纤通道FCoEiSCSINFSSMB/CIFS在 Data Fabric 中,您可以使用一组通用功能,并可快速、高效地在平台之间进行复制。您可以使用相同的接口和相同的管理工具。DX1100U:ONTAP Select 软件定义存储解决方案3637DX1100U Gateway网关型统一存储系统32GB 缓存2*10Gb+2*1GbNFS/CIFS/SMB/iSCSI100TB/400TB 容量许可ONTAP 软件功能包秒级数据备份/恢复 DX1100U Per
92、formance性能型(SAS)统一存储系统32GB 缓存2*10Gb+2*1GbNFS/CIFS/SMB/iSCSI100TB/400TB 容量许可ONTAP 软件功能包秒级数据备份/恢复 跨机柜数据服务双活DX1100U Capacity容量型(SATA)统一存储系统32GB 缓存2*10Gb+2*1GbNFS/CIFS/SMB/iSCSI100TB/400TB 容量许可ONTAP 软件功能包秒级数据备份/恢复 跨机柜数据服务双活 中小型客户数据管理利器DX1100U 是将 ONTAP Select 部署于经过验证的联想服务器上的数据管理存储解决方案,并可与 DM/FAS 主存储组成低成本
93、的 SnapMirror 和 SnapVault 数据容灾、备份解决方案,是中小型客户数据管理的利器。为满足客户不同的场景要求,DX1100U 包含三个型号:DX1100U 网关型适合企业利旧存储或者为 SAN 存储添加高性能 NAS 功能等场景;DX1100U 性能型适合对于软件定义存储性能有一定要求的场景,譬如大规模文件共享环境等场景;DX1100U 容量型适合对于软件定义存储容量有要求的场景,譬如海量文件、或者为 FAS 或者 DM 等其他 ONTAP 产品作为第二存储等场景;无论哪款 DX1100U,都可实现多单节点或者多节点集群配置。3839轻量级数据库/应用(iSCSI)文档库/文
94、件共享平台(NAS)双节点集群适用场景:部门/分支机构数据库/应用/文档库存储高可用(跨机柜双活)4/6/8 节点集群适用场景:私有云单节点集群适用场景:DM/FAS 第二存储(容灾备份)入门级 NAS轻量级应用共享SAN 存储利旧 DX1100U 的典型使用场景入门级统一存储您的公司/部门是否有文件共享需求?您的公共文件是否需要进行统一管理和权限控制?您目前如何保护您的文档库数据?您需要一台性能卓越的软件定义存储 NAS?您的应用同时需要块级存储和文件共享?无需自己动手配置软件定义存储软件和硬件,出厂自带优化配置原生 ONTAP 系统,同时支持非结构化数据、结构化数据高敏捷性:一天之内便可部
95、署完成通过为 NAS 和 SAN 工作负载提供企业级数据精简和数据保护功能,最大限度提高价值基于领先的 ONTAP 9 存储软件构建的一系列企业级功能秒级数据备份/恢复 ONTAP Select 集群部署方式机柜#1iSCSISMB/CIFS/NFSMediator机柜#1DX1100U 跨机柜双活统一存储SAN:iSCSINAS:SMB/CIFS/NFS2/4/6/8 节点HA 可实现:数据中心内自动故障切换Raid+数据镜像双重保护秒级数据备份/恢复DX1100U 统一存储:2 个 1/10Gb 接口 SAN:iSCSINAS:SMB/CIFS/NFS32GB 缓存可用容量 15100TB
96、 秒级数据备份/恢复跨机柜双活统一存储解决方案您的公司是否有统一存储需求并要求双活?您是否担心单套存储或磁盘笼故障导致数据丢失风险?低成本存储高可用解决方案敏捷双活部署,无需额外硬件或许可第三点仲裁防止脑裂通过为 NAS 和 SAN 工作负载提供企业级数据精简和数据保护功能,最大限度提高价值。企业级数据管理和保护功能,SAN+NAS 统一数据服务 企业级数据管理和保护功能,SAN+NAS 统一数据服务轻量级数据库/应用文档库/文件共享平台机柜#1iSCSISMB/CIFS/NFS机柜#1低起配节点数,同时支持文件接口和块接口全球知名的文件存储(需补充数据来源)基于领先的 ONTAP 9 存储软
97、件构建的一系列企业级功能秒级数据备份/恢复大型企业部门/分支机构/远程办公室您的公司如何处理分支机构数据上收问题?众多分支/部门数据如何进行统一管理和保护?通过统一的 ONTAP 平台实现从分支到中心的统一数据管理与传输由软件定义的存储与商用硬件构建一体机,存储部署成本低高敏捷性:部署一天之内便可完成与主存储完全一致的存储系统和管理平台基于领先的 ONTAP 9 存储软件构建的一系列企业级功能SnapMirror+SnapVault 容灾+备份,无额外许可收费企业级数据管理和保护功能,SAN+NAS 统一数据服务DX1100U(ONTAP Select)ONTAP 全闪/混合阵列DX1100U
98、(ONTAP Select)DX1100U(ONTAP Select)DX1100U(ONTAP Select)远程数据一致性复制4041统一存储网关您的公司如何有效管理老旧存储?您有一台性能超棒的 SAN,但是缺一台 NAS?VDI 环境VDIVDI 共享存储SAN 存储DX1100U(Gateway)个人文件夹(CIFS/SMB/NFS)企业级数据管理和保护功能,SAN+NAS 统一数据服务利用现有基础架构提供企业级数据服务,为 NAS 和 SAN 工作负载实现企业级数据管理和数据 保护为异构存储提供 Data Fabric 接入桥梁,在 Data Fabric 中无中断移动复制数据高敏捷
99、性:部署一天之内便可完成与主存储完全一致的存储系统和管理平台基于领先的 ONTAP 9 存储软件构建的一系列企业级功能典型混合云架构您是否正在忧虑如何从纯本地私有数据中心过度到混合云?您是否有边缘计算但是无法把数据保留在边缘节点?您的数据在边缘、核心数据中心和/或云上,但是它们无法统一管理,迁移也很麻烦?自动驾驶数据管理方案可以参考下列自动驾驶数据管理方案无处不在 车端、私有云、近云、公有云都可以部署 ONTAP灵活部署 支持以软件方式(VM)或存储硬件部署数据访问 支持 NFS 直接访问,数据分类、训练简单、成熟、稳定数据传输 精简传输(IP 或物理搬运)数据归档 内置数据生命周期管理引擎与
100、公有云完全集成数据安全 内置快照、备份、容灾全套数据保护方案强强联合 NVIDIA/NetApp DGX-POD 自动驾驶深度学习参考架构 AWS/NetApp/GDS 自动驾驶近云数据管理参考架构 4243DXS:十年磨一剑的分布式块存储联想 DXS 分布式存储管理系统基于联想 ThinkCloud 分布式存储软件,是一款可大规模横向扩展的云存储产品,高性能、高可靠、高扩展能力,有助于用户扩展存储规模,作为联想最早在分布式存储市场的开山之作,DXS 在软件定义存储市场坚守了十年技术迭代与创新,经过长期的用户生产系统实践,DXS 经受住了市场考验。DXS 利用分布式技术将 NVMe(Non-V
101、olatile Memory express,非易失存储器)、SSD(Solid State Disk,固态硬盘)、HDD(Hard Disk Drive,硬盘驱动器)等存储介质组织起来,构建全分布式存储池,为用户和上层应用提供丰富的基于标准接口协议的 API。另外,DXS 分布式存储管理系统提供快照、远程备份与恢复、精简配置等企业级服务,确保企业级用户灵活、高效地存取数据。DXS 产品定位DXS 充分利用了虚拟化平台特点以及 SSD 设备的特性,进行了深入地优化与整合,使得在面对大规模虚拟化的场景中,和传统集中式存储相比,占了较大的优势;DXS 基于通用服务器大幅提升存储资源的部署、扩展和运
102、维效率,降低 TCO。DXS 全分布式架构解决方案数据高可靠:EC 模式、副本模式、远程备份及恢复业务高可靠:重建1TB 数据时间 18分钟支持节点亚健康监测支 持 数 据 恢 复 的QoS 控制支持 NVME稳定的性能按需扩容数据强一致自动数据均衡存储资源按需分配功能丰富且易于操作的可视化管理界面支持 OpenStack、数据库或 VMware vSphere 等,适用于云计算、虚拟化、数据库应用、VDI 等应用场景支持超融合部署支持计算存储分离部署卷级别的 QoS 控制高性能快照精细化的多租户权限管理完备的监控与告警机制支持可信易用的多种API应用软件层接口层分布式存储层内核与文件系统层硬
103、件层Ceph RBDiSCSl管理平台DXS 分布式存储系统自研文件系统块存储层:NVMe 驱动器/SATAx86 服务器10G/25G 以太网NVMe SSD 磁盘SSD/HDD 磁盘iSCSI HA 服务QoS扩展性备份快照自研管理接口高可靠硬件/驱动器Lenovo 特性上层集成4445 技术规格系统架构系统特性应用场景系统扩展性数据恢复时间副本及纠删码支持协议高级功能存储网络认证证书采用全对称体系架构,无独立元数据节点IP SAN 分布式块存储系统结构化数据应用场景、块存储应用场景存储节点,最小 3 节点起,支持最大 256 节点扩展每节点最大支持 24 块数据盘单个系统最少支持 4 万
104、个卷单个系统最多支持 1 万个客户端单个卷最少支持 200 个快照单个卷的最小容量为 8 TB恢复优先模式下,1TB 数据重建速度不高于 30 分钟可支持 2 或 3 副本LibRBD;iSCSI系统高可用及自动故障恢复;存储管理单元控制;集群存储系统监控;VMWare VAAI;Openstack Cinder、Glance 接口支持;快照与克隆;远程复制功能;数据动态迁移,负载均衡分布支持 10Gb、25Gb、40Gb、100Gb 以太网络计算机软件著作权;CCC;CELP;CECP 产品特点按需扩容高可靠与高性能数据强一致自动数据均衡存储资源按需分配提供多种企业级服务适用于多种应用场景稳
105、定的性能功能丰富且易于操作的可视化管理界面0070809DXS 分布式块存储的优势 应用场景介绍政府云:联想 DXS 分布式存储管理系统利用分布式技术将 NVMe、SSD 和 HDD 等存储介质组织起来,构建分布式存储池,便于统一管理存储资源,确保政府部门提供一站式服务,集中管理数据。此外,联想 DXS 分布式存储管理系统支持在线扩容,可以让政府部门更好地应对未来业务的增长。运营商虚拟化:联想 DXS 分布式存储管理系统支持在线扩容和统一管理。联想硬件设备采用通用服务器,便于运营商管理和维护存储设备、降低存储成本。此外,系统支持存储池资源隔离、数据安全策略和智能检测等功能
106、,确保数据的可靠性。金融云:联想 DXS 分布式存储管理系统具有高可靠性、高性能等特点,确保银行数据安全。系统提供存储QoS(Quality of Service,服务质量)管理服务,支持数据中心级和存储卷级的服务质量调整,满足多种金融业务需求,提高用户体验。智慧医疗:联想 DXS 分布式存储管理系统支持在线扩展,可以存储智慧医疗行业的海量数据。系统也支持存储池资源隔离、数据安全策略设置和快速数据恢复,从而满足智慧医疗需求。4647联想凌拓国产化分布式存储4849 “多芯多能”的国产化分布式存储方案随着国家信息安全战略的逐步推进,存储系统的安全以及关键信息装备的自主可控,引起了社会各方的强烈关
107、注。存储“自主可控”一般指在技术、产品、生产等方面都不依赖于外部国家或公司,并且能够自主研发、生产、运营的能力,为此,我们已经实现:建立一支存储领域的专家和工程师高素质的技术团队 国内建设研发基地,具备研发并生产能力 独立开展研发工作,具有自主知识产权的硬件和软件 建立一支本地化运营和维护团队 专业的安全和隐私保护团队“多芯多能”是联想凌拓最初设计国产化分布式存储的目标之一,未来 Intel 和国产化芯片会长期共存,满足不同的业务场景,因此分布式存储软件要兼容广泛的 CPU 架构,除了 Intel、AMD等平台外,还要支持国产化芯片如:海光、飞腾、申威、鲲鹏等,确保用户在不同的硬件架构下也能很
108、好的完成数据安全存储的目标。“多能”则是指分布式存储要适应不同的数据应用场景,通常企业中的分布式存储除了要支持传统应用的稳态业务外,还要兼容云计算、容器等敏态的业务应用。作为领先的国产分布式统一存储平台提供商,联想凌拓建立了本地研发、生产、产品、营销、售后等团队,基于国芯国魂的分布式存储能面向金融、政府、运营商、交通、教育、医疗等行业,提供数据信息存储、安全管理整体国产化分布式存储解决方案,为国家信息安全保驾护航。作为面向国产化存储市场的旗舰产品,联想凌拓的国产芯片服务器+国产操作系统+国产分布式存储软件三位一体的方案已逐渐成熟,为用户提供更加安全可靠的数据保护、全面细致的管理功能、便捷易用的
109、存储运维,更好地满足未来业务发展要求。文件共享流媒体内容存储S3 云存储数据归档传统应用私有云/容器云应用文件接口NFS/CIFS/FTP/POSIX/HDFS国产操作系统国产处理器国产服务器对象接口S3国产分布式存储软件5051架构容量数据保护存储策略简单管理全对称架构横向扩至 4096 节点EB 级容量规模支撑海量存储需求快照数据保护避免“软故障”灾难故障自愈技术无需担心数据丢失纠删码、多副本多种冗余保护方案高效智能缓存策略提高数据访问体验文件 WORM满足稳健合规要求远程容灾方案保证业务的连续性TerraQoS 管理保障重要业务性能统一管理界面数据状态一目了然功能组件丰富满足多样化业务需
110、求 联想凌拓国产化分布式存储特点相比较其他厂商而言,联想凌拓的国产化分布式存储系列有如下几点特点:强大的自研支撑体系:在复杂业务场景中深入推广国产化分布式存储,除了需要可靠的商业化一站式解决方案外,还需要有本地研发团队的支持,相对于其他大部分基于开源软件代码的分布式存储厂商,联想凌拓拥有代码自主知识产权,针对多种国产化 CPU 平台深度优化,加速用户适配和转型。多元化生态:国产化分布式存储要完全融入自主的国产化技术堆栈,包括芯片、操作系统、存储软件,还需要支持一魂多芯,具备对多种国产化处理器、国产化操作系统的兼容要求,联想凌拓的国产化分布式存储解决方案在 CPU 架构层面分别适配了海光、飞腾、
111、鲲鹏、申威等,操作系统分别适配了麒麟、UOS 统信等,能满足国产化生态建设的多元化趋势与场景开放合作的拓展态势。丰富企业级功能:国产化分布式存储除了基本的协议覆盖满足多种应用需求外,还要求具备企业级存储的能力,能同时支持 7 种场景,SMB、NFS、FTP、S3、HDFS、OpensStack Manila、Kubernetes CSI,存储引擎可以弹性扩展至 EB 级,容量、性能和成本随业务需求线性增长,提供负载均衡、嵌套快照、权限管理、多站点容灾、日志审计和统一监控等多种存储功能,能够高效支撑政企用户的典型应用。目前已获得 16 项国家发明专利目前已获得 16 项国家发明专利 典型国产化存
112、储应用场景国产化海量非结构化存储系统联想凌拓国产化分布式存储解决方案,搭载国产高性能多核处理器,配备自主研发的存储系统,具备从核心器件到存储系统软件的完全自主知识产权,满足金融、政府、运营商等核心部门的海量非结构化数据高性能存储需求。产品规格系统架构系统特性应用场景系统扩展性数据重构时间副本及纠删码支持协议访问控制高级功能存储网络数据盘单盘容量认证证书全对称分布式架构分布式存储系统,元数据索引数据库非结构化文件及对象国芯分布式存储应用场景存储节点,最小 3 节点起,最大支持 4096 节点扩展;每节点最大支持 90 块数据盘;支持统一管理最大集群数量 128 个5253MagnaScale数据
113、管理平台54 技术特点丰富的企业级特性 全对称式架构,消除传统控制器架构和元数据节点带来的性能瓶颈 全方位的数据保护,提供磁盘校验、副本/EC、嵌套式快照、WORM、远程容灾等数据保护 多协议支持,支持 POSIX、SMB/CIFS、NFS、FTP、S3、HDFS 等接口 完善的生态,支持开放的云标准,兼容 OpenStack manila 和 Kubernetes CSI 软硬件解耦,与服务器硬件充分解耦,可以部署在认证的第三方服务器平台上 亚健康管理,支持对硬盘、网络进行全面的亚健康状态监控 对象存储,支持完善的对象存储功能卓越的读写性能 大小文件优化,MagnaScale 针对大文件和小
114、文件做自动优化处理 智能的负载均衡策略,基于轮询、节点连接数和节点综合负载的负载均衡策略能有效降低热点 闪存加速,通过高性能的闪存来提高磁盘的 IO 速率,非常适合加速小文件的随机读写 小对象聚合,在线将小对象文件合并成大对象,能极大提升小对象写入存储的速度 全闪存支持,支持全闪存储环境,充分满足企业对于高性能场景的需求简单安全的管理运维 优秀的配置向导,即使缺乏分布式存储管理经验的管理员也能快速上手 快捷高效的全局搜索,模糊搜索或快速匹配,帮助管理员在秒级定位目标对象 简单直观的视图,单一管理界面实现各节点硬件资源监控和文件对象的资源逻辑视图分布式存储平台国产化存储MCS 认证存储平台文件、
115、对象存储纯对象存储应用层硬件层通用服务器国产化服务器高速网络银行票据影像医院PACS 影像档案馆档案数字化自然资源遥感、卫星汽车/制造业设计图纸广电媒资影音文件行业解决方案(政府/运营商/电力/教育/交通)MagnaScale 数据管理平台 MagnaScale 数据管理平台MagnaScale 数据管理平台是 ThinkSystem DXN 分布式软件定义存储的核心软件,具有高性能、高可靠、高可用、横向扩展的特点 MagnaScale 解决方案架构特点业界荣誉与服务器硬件充分解耦,为用户提供更灵活的硬件选择软件定义全方位的数据保护技术让数据安全万无一失安全可靠丰富的企业级存储特性,让数据管理更加轻松自如企业及特性源于云架构的数据管理帮助客户实现高效超大规模文件数据访问云原生545554“得数据者得天下”,数据是数字时代不逊色于石油的财富。面对数字时代海量的数据,联想凌拓软件定义存储系列将助力企业更加简单灵活,安全高效地管理数据,从容应对数据管理方面的需求和挑战,深挖数据价值使数据驱动业务创新,从而抢抓数字新机,赢得发展先机。总结