超融合和经常提到的分布式存储有什么关联?

超融合和经常提到的分布式存储有什么关联?,第1张

首先你必须了解什么是超融合?

超融合基础架构(Hyper-Converged Infrastructure,或简称“HCI”)也被称为超融合架构,是指在同一套单元设备(x86服务器)中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术,而且还包括缓存加速、重复数据删除、在线数据压缩、备份软件、快照技术等元素,而多节点可以通过网络聚合起来,实现模块化的无缝横向扩展(scale-out),形成统一的资源池。

其次你必须了解什么是分布式存储

关于分布式存储实际上并没有一个明确的定义,甚至名称上也没有一个统一的说法,大多数情况下称作 Distributed Data Store 或者 Distributed Storage System。

其中维基百科中给 Distributed data store 的定义是:分布式存储是一种计算机网络,它通常以数据复制的方式将信息存储在多个节点中。

在百度百科中给出的定义是:分布式存储系统,是将数据分散存储在多台独立的设备上。分布式网络存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。

尽管各方对分布式存储的定义并不完全相同,但有一点是统一的,就是分布式存储将数据分散放置在多个节点中,节点通过网络互连提供存储服务。这一点与传统集中式存储将数据集中放置的方式有着明显的区分。

区别与联系

超融合基础架构从定义中明确提出包含软件定义存储(SDS),具备硬件解耦的能力,可运行在通用服务器之上。超融合基础架构与 Server SAN 提倡的理念类似,计算与存储融合,通过全分布式的架构,有效提升系统可靠性与可用性,并具备易于扩展的特性。

由于很多读者对超融合构成还比较混淆,以下以 SmartX 的超融合软件 SMTX OS 为例说明分布式存储和其他模块的关系。

其中分布式块存储,SMTX ZBS 是SMTX OS超融合软件最核心的组件。它采用全分布式架构并且是完全符合软件定义理念的。

首先先看下什么是超融合?

超融合基础架构(Hyper-Converged Infrastructure,或简称“HCI”)也被称为超融合架构,是指在同一套单元设备(x86服务器)中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术,而且还包括缓存加速、重复数据删除、在线数据压缩、备份软件、快照技术等元素,而多节点可以通过网络聚合起来,实现模块化的无缝横向扩展(scale-out),形成统一的资源池。

超融合架构有哪些组件?

从上面的概念可以看到,超融合主要包含存储,虚拟化,数据保护等模块。具体结合smtx os超融合架构,可以看到超融合主要包含以下模块,具体每个厂家都会有所差异:

管理模块:web控制台

虚拟化模块

数据保护与容灾模块:双活集群与备份。

分布式存储模块

如果兼容其他虚拟化,可能还有一个纳管模块。

什么是HPC

高性能计算(High Performance Computing)机群,简称HPC机群。构建高性能计算系统的主要目的就是提高运算速度,要达到每秒万亿次级的计算速度,对系统的处理器、内存带宽、运算方式、系统I/O、存储等方面的要求都十分高,这其中的每一个环节都将直接影响到系统的运算速度。这类机群主要解决大规模科学问题的计算和海量数据的处理,如科学研究、气象预报、计算模拟、军事研究、CFD/CAE、生物制药、基因测序、图像处理等等。

什么是超融合


超融合基础架构(Hyper Converged Infrastructure,或简称“HCI”)是指在同一套单元设备中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术,而且还包括备份软件、快照技术、重复数据删除、在线数据压缩等元素,而多套单元设备可以通过网络聚合起来,实现模块化的无缝横向扩展(scale-out),形成统一的资源池。超融合(甚至超超融合)在本地很容易实现:将计算、网络和存储都集成在一个设备内,并且通过它由供应商预先配置好且差不多到手就可以使用。HCI是实现“软件定义数据中心”(SDDC)的终极技术途径。HCI类似Google、Facebook后台的大规模基础架构模式,可以为数据中心带来最优的效率、灵活性、规模、成本和数据保护。

超融合架构是构建高性能计算中心的一种全新的IT基础架构。

参考资料:

百度百科:HPC

百度百科:超融合

首先说下什么融合系统,准确来说应该是融合架构,它更强调各种硬件的组合

参考资料:

百度百科:融合系统)

在传统的企业IT采购中,企业需要分散的购买服务器、存储、网络,在进行集成和调优,而今,融合系统将这三大组件工厂集成,形成一种“框架计算机”的模式,或者说是将数据中心压缩到一个“盒子”中。

其次,什么是超融合架构

超融合基础架构(Hyper Converged Infrastructure,或简称“HCI”)是指在同一套单元设备中不仅仅具备计算、网络、存储和服务器虚拟化等资源和技术,而且还包括备份软件、快照技术、重复数据删除、在线数据压缩等元素,而多套单元设备可以通过网络聚合起来,实现模块化的无缝横向扩展(scale-out),形成统一的资源池。

超融合一体机是搭载了超融合软件的一种超融合设备。

可见市面上将存储设备、服务器、网络交换机放在一个机柜里整体交付的融合方案(如:VCE Vblock)则和超融合完全不是一回事,融合架构更多强调软件硬件预先配置和验证好,整体交付。

无论采用哪种技术路线、哪种方案和产品对现有 VMware 环境进行替换,都不能 100% 保证在功能特性和使用体验方面的完全一致。因此,最终的替换决策必然是在认真评估后做出的主动调整:放弃部分非核心、不必要的功能,或通过应用层、架构层的改造以达到同样的效果。

1、聚焦替换 vSphere 并兼顾存储

虚拟化基础设施的核心是 Hypervisor 和存储。

首先,从 Hypervisor 技术和产品角度考虑:有可能用于填补 vSphere 空白的国内虚拟化产品都是基于 KVM 进行的开发。

再考虑虚拟化环境中使用的存储:在国内用户的 vSphere 部署中,大部分采用了集中式 SAN 存储与之配合。那么,替换 vSphere 的方案,也必须包含对集中式 SAN 存储部分的考虑。

2、置换为超融合 HCI

在虚拟化和存储的改造过程中,有些用户也有可能将“虚拟机与外置存储分离部署”的方式替换为更加简单、d性敏捷的超融合(HCI)方式。

3、转向整体私有云方案

国内的整体私有云解决方案大部分以 OpenStack 为基本技术栈进行开发。OpenStack 基于大量开源项目组成,并经过各个厂商的商业开发,形成了多种商用云方案。OpenStack 全面的云方案可以同时管理 IaaS 层的资源池(服务器、存储和网络),将不再需要分别从计算、存储或网络的角度考虑对 VMware 的替换路线图,而是从整体“私有云”维度进行重建。

4、依托公有云技术栈的专属

专属云(Dedicated Cloud)是以公有云为基础,面向特定行业、特殊需求的云客户,提供全栈资源池的专属解决方案。专属云客户可以选择在公有云上独占机架、服务器和网络,通过基础设施隔离获得资源的专属使用权和安全性,但专属云的建设和运维仍交由公有云提供商承担。专属云打消了国内用户对公有云资源共享模式带来的安全合规、数据私密性等一系列顾虑,也在规模化部署、快速交付和集中运维方面享有了公有云深厚技术底蕴带来的福利。国内的主要公有云服务商都可以提供专属云服务,通常面向规模较大的国企、央企、集团公司、金融等行业。

由于专属云所依赖的公有云技术在管理平面的开销较大,起步即要求几十个节点(管理节点的要求)。这导致专属云的首次投入占比大,而且普通用户往往不具备运维这种规模的云平台的能力。除了大型客户以外,其他客户很难承受其巨大的投入和运维压力。

完整版可参考知乎专栏文章:生产级 VMware 虚拟化方案替换路线与评估

无论采用哪种技术路线、哪种方案和产品对现有 VMware 环境进行替换,都不能 100% 保证在功能特性和使用体验方面的完全一致。因此,最终的替换决策必然是在认真评估后做出的主动调整:放弃部分非核心、不必要的功能,或通过应用层、架构层的改造以达到同样的效果。

可用于 VMware 替换的技术路线

1、聚焦替换 vSphere 并兼顾存储

虚拟化基础设施的核心是 Hypervisor 和存储。

首先,从 Hypervisor 技术和产品角度考虑:有可能用于填补 vSphere 空白的国内虚拟化产品都是基于 KVM 进行的开发。我们从 IDC 发布的“2020 年中国软件定义计算市场份额”中看到,有潜力成为 vSphere 虚拟化产品替代者的,是榜单上的华为、新华三、浪潮。2022 年 Gartner “Market Guide for Server Virtualization” 中则仅提到了华为和深信服。

再考虑虚拟化环境中使用的存储:在国内用户的 vSphere 部署中,大部分采用了集中式 SAN 存储与之配合。那么,替换 vSphere 的方案,也必须包含对集中式 SAN 存储部分的考虑。比如,既有 SAN 存储产品是否为国外品牌?是否在 vSphere 替换的同时,将 SAN 存储也替换为国内自主研发的、符合信创要求的产品?

2021 年上半年的 IDC 报告列出的中国企业级外置存储市场排名前三的华为、新华三和浪潮,采用的都是全自研的存储产品。在 vSphere 的国内部署中,已经有很大部分用户采用了这些国产存储产品,以国产存储替代国外同类产品,并不存在障碍。对于这一部分用户,首先考虑选择成熟的 KVM 虚拟化软件作为 vSphere 的替代者。虚拟化与存储之间通过 iSCSI、NFS 等标准接口连接,这就为保留现有国产集中存储、并逐步将非国产存储产品进行替换创造了条件。

针对这个方案需要注意的两点是:

虽然目前国内 IT 厂商具备了自主研发中端存储的实力,但之前大多基于 x86 平台,并非符合信创要求的产品。而基于海光、鲲鹏、飞腾等国产 CPU 的硬件,则需要全新的设计。从“国产存储”到“信创存储”,整个产品的成熟和迭代周期会比较长。

由于 SAN 存储系统的复杂性,应对企业数字化业务快速增长的d性需求已经捉襟见肘,目前 SAN 存储的分布式和软件定义转型也已经是大势所趋。这时也可以选择支持 vSphere 虚拟化的国内超融合厂商,先完成存储部分的转型和替换,再逐步实现对 vSphere 的替换。

2、置换为超融合 HCI

在虚拟化和存储的改造过程中,有些用户也有可能将“虚拟机与外置存储分离部署”的方式替换为更加简单、d性敏捷的超融合(HCI)方式。在这个领域,IDC 2021 年排名靠前的国产自主研发的超融合产品分别来自华为、新华三、深信服、浪潮和 SmartX,其中 SmartX 作为唯一独立的超融合厂商,在金融行业超融合软件市场占有率排名第一, 以良好的口碑被 IDC 评价为“在金融行业得到青睐”。

从 SmartX 等厂商的金融行业案例可以看到,对于现有基础架构为 vSphere + SAN 存储的用户,将其替换为国产超融合方案已经得到生产环境的验证。同时,选择国产自主研发的超融合产品不仅意味着实现 VMware 替换,更能实现从传统架构到分布式架构和软件定义方式的转型——简化了虚拟化计算和存储的层次结构,落地容易,d性很好,按需扩展(通常 3 个节点起步),风险更低。

超融合架构除了具备软件定义和分布式架构带来的优势,因为包含了虚拟化、存储这两个核心组件,可以同时实现虚拟化层和存储层的信创替代。从信创角度看,国产超融合方案普遍基于标准的信创服务器,实现了软硬件的解耦,可以快速地适配。随着信创产品的不断升级,标准化的服务器和软件也都可以快速迭代。同时,分布式的架构通过软件方式解决系统冗余问题,还能提升整个资源池的性能,减少了信创 CPU 在性能上目前的不足。

3、转向整体私有云方案

国内的整体私有云解决方案大部分以 OpenStack 为基本技术栈进行开发。OpenStack 基于大量开源项目组成,并经过各个厂商的商业开发,形成了多种商用云方案。OpenStack 全面的云方案可以同时管理 IaaS 层的资源池(服务器、存储和网络),将不再需要分别从计算、存储或网络的角度考虑对 VMware 的替换路线图,而是从整体“私有云”维度进行重建。

根据 IDC 2021 年发布的软件定义计算软件市场半年跟踪报告,华为、新华三、浪潮、EasyStack 和九州云,在主要体现 OpenStack 技术路线的“云系统软件”分类中排名前五。

基于开源 OpenStack 方案的一个优势是,可以快速从社区获得最新的功能。在 OpenStack 社区贡献度排行榜上,国内云企业近年来也名列前茅。

不过目前基于 Openstack、Ceph 构建的私有云方案,由于模块众多、商用化程度有限、稳定性欠佳,因而大部分部署在开发测试环境,不能实现对用户架构的真正统一,没有真正达到用户云化转型的预期效果,在热度过后,理性用户已经开始更加谨慎地选择类似的架构。

4、依托公有云技术栈的专属云

专属云(Dedicated Cloud)是以公有云为基础,面向特定行业、特殊需求的云客户,提供全栈资源池的专属解决方案。专属云客户可以选择在公有云上独占机架、服务器和网络,通过基础设施隔离获得资源的专属使用权和安全性,但专属云的建设和运维仍交由公有云提供商承担。专属云打消了国内用户对公有云资源共享模式带来的安全合规、数据私密性等一系列顾虑,也在规模化部署、快速交付和集中运维方面享有了公有云深厚技术底蕴带来的福利。国内的主要公有云服务商都可以提供专属云服务,通常面向规模较大的国企、央企、集团公司、金融等行业。

由于专属云所依赖的公有云技术在管理平面的开销较大,起步即要求几十个节点(管理节点的要求)。这导致专属云的首次投入占比大,而且普通用户往往不具备运维这种规模的云平台的能力。除了大型客户以外,其他客户很难承受其巨大的投入和运维压力。

完整版可参考知乎专栏文章:生产级 VMware 虚拟化方案替换路线与评估


欢迎分享,转载请注明来源:内存溢出

原文地址: https://outofmemory.cn/zz/13444167.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-08-07
下一篇 2023-08-07

发表评论

登录后才能评论

评论列表(0条)

保存