2011年8月21日,Netscape創(chuàng)始人馬克·安德森(Marc Andreessen,硅谷著名投資人,投資了Facebook、Groupon、Skype、Twitter、Zynga和LinkedIn等高科技新秀),在華爾街日報上發(fā)表《軟件正在吞噬整個世界》,認為當今的軟件應(yīng)用無所不在,并且正在吞噬整個世界:“越來越多的大型企業(yè)及行業(yè)將離不開軟件,網(wǎng)絡(luò)服務(wù)將無所不在,從電影、農(nóng)業(yè)到國防。許多贏家將是硅谷式的創(chuàng)新科技公司,它們侵入并推翻了已經(jīng)建立起來的行業(yè)結(jié)構(gòu)。未來十年,我預(yù)計將有更多的行業(yè)被軟件所瓦解。”安德森以亞馬遜顛覆圖書零售巨頭Borders(已于2011年2月破產(chǎn))、Netflix顛覆視頻行業(yè)、蘋果顛覆音樂行業(yè)、Skype顛覆電信行業(yè)、LinkedIn顛覆招聘、PayPal顛覆支付等為例,并指出基于互聯(lián)網(wǎng)的服務(wù),將讓新創(chuàng)建全球性軟件初創(chuàng)公司變得容易。
2013年10月,Gartner發(fā)布的2014年十大戰(zhàn)略技術(shù)中,重要組成部分就有:軟件定義一切。Gartner認為:軟件定義一切囊括了在基礎(chǔ)設(shè)施可編程性標準提升下不斷增長的市場勢頭、由
云計算內(nèi)在自動化驅(qū)動的數(shù)據(jù)中心互通性、DevOps和快速的基礎(chǔ)設(shè)施提供等。軟件定義一切還包括各種舉措,如OpenStack、Open Flow、Open Compute Project和Open Rack,共享相同的愿景。開放性將成為供應(yīng)商的目標,SDN(網(wǎng)絡(luò))、SDDC(數(shù)據(jù)中心)、SDS(存儲)和SDI(基礎(chǔ)架構(gòu))技術(shù)的供應(yīng)商都力圖成為所在領(lǐng)域的領(lǐng)導。
那么,什么是軟件定義? 難道以前沒有軟件定義? 都是硬件定義嗎?
我們先來看一下,什么是軟件?
軟件是用戶與硬件之間的接口界面。用戶主要是通過軟件與硬件進行交流。
早期,為了大規(guī)模生產(chǎn),降低制造的復雜度和成本。許多功能都固化在硬件里,我們可以稱之為硬件定義。隨著人民日益增長的多樣化、個性化定制的需求,以及云計算所要求的,更加智能、更加靈活的自動化的需求,由軟件定義來操控硬件資源的需求將越來越多、越來越廣。
最早的空調(diào)里面也有軟件,但相對固化,不提供或者提供非常少的接口,缺乏靈活性。那時,我們只能選擇溫度,或者開關(guān);后來出現(xiàn)了更多的選擇,如風速、風向等的設(shè)定。到了智能家居的時代,通過向應(yīng)用軟件開放空調(diào)的編程接口,使得我們能在回家之前,就借助手機或者平板,開啟并設(shè)置空調(diào)了。
軟件定義,究其本質(zhì),就是將原來高度耦合的一體化硬件,通過標準化、抽象化(虛擬化),解耦成不同的部件。圍繞這些部件,建立起虛擬化軟件層,以API(應(yīng)用編程接口)的方式,實現(xiàn)原來硬件才提供的功能。再由管理控制軟件,自動地進行硬件資源的部署、優(yōu)化和管理,提供高度的靈活性,為應(yīng)用提供服務(wù)。
簡而言之,就是更多地由軟件來驅(qū)動并控制硬件資源。
需要注意的是,軟件定義其實是一個過程,不是一蹴而就的目標,它分成不同階段。軟件定義逐漸將硬件與軟件進行解耦,將硬件的可操控成分按需求,分階段的,通過編程接口或者以服務(wù)的方式逐步暴露給應(yīng)用,分階段地滿足應(yīng)用對資源的不同程度、不同廣度的靈活調(diào)用。
什么是軟件定義存儲?
當我們討論軟件定義存儲的時候,避免不了要先回顧一下軟件定義這個詞匯出現(xiàn)的歷史。
在IT基礎(chǔ)架構(gòu)領(lǐng)域,最早出現(xiàn)的軟件定義,是軟件定義網(wǎng)絡(luò)(Software Defined Network)。SDN起源于2006年斯坦福大學的C
LEAN Slate研究課題。2009年,Mckeown教授正式提出了SDN概念。通過將網(wǎng)絡(luò)設(shè)備的控制平面與數(shù)據(jù)平面分離開來,并實現(xiàn)可編程化控制,實現(xiàn)了網(wǎng)絡(luò)流量的靈活控制,為核心網(wǎng)絡(luò)及應(yīng)用的創(chuàng)新提供了良好的平臺。
隨后,在2012年8月,VMware在其VMworld 2012大會上首次提出軟件定義數(shù)據(jù)中心(Software Defined Data Center,簡稱SDDC)的概念。
VMware認為,軟件定義的數(shù)據(jù)中心,是 IT 演變的下一個階段,是迄今為止最有效、恢復能力最強和最經(jīng)濟高效的云計算基礎(chǔ)架構(gòu)方法。SDDC方法論將對存儲、網(wǎng)絡(luò)連接、安全和可用性應(yīng)用抽象、池化和自動化,整個數(shù)據(jù)中心由軟件自動控制。 基礎(chǔ)架構(gòu)提供的服務(wù)將聚合起來,并與基于策略的智能調(diào)配、自動化和監(jiān)控功能結(jié)合在一起使用。應(yīng)用編程接口和其他連接器支持無縫延展到私有云、混合云和公有云平臺。
總結(jié)一下,SDDC概念的核心包括:
軟件定義的數(shù)據(jù)中心由軟件自動控制;
軟件定義包括三個階段:抽象、池化和自動化;
軟件定義的數(shù)據(jù)中心包括五大組成部分:計算、存儲、網(wǎng)絡(luò)、管理和安全。
作為VMware軟件定義數(shù)據(jù)中心五大組成部分之一,軟件定義存儲(Software Defined Storage,簡稱SDS)的概念也在全球范圍內(nèi),首次被提出。
VMware認為:軟件定義的存儲產(chǎn)品是一個將硬件抽象化的解決方案,它使你可以輕松地將所有資源池化并通過一個友好的用戶界面(UI)或API來提供給消費者。一個軟件定義的存儲的解決方案使得你可以在不增加任何工作量的情況下進行縱向擴展(Scale-Up)或橫向擴展(Scale-Out)。
實際上,SDS的定義出現(xiàn)至今已經(jīng)三年多了,但仍沒有統(tǒng)一的標準,VMware的定義也只是一家之言。各家權(quán)威咨詢機構(gòu),各大廠商,都對這一概念有著不同的定義或描述。下面我們再來看看SNIA對SDS描述。SNIA是Storage Networking Industry Association的簡稱,也即全球網(wǎng)絡(luò)存儲工業(yè)協(xié)會,做為曾經(jīng)制定過SAN,NAS,對象存儲,云存儲等標準的第三方協(xié)會,我們有理由相信,SNIA對SDS的看法比較權(quán)威。其內(nèi)容也確實有助于大家更深刻地理解SDS。
SNIA在SDS的定義中提到,SDS允許異構(gòu)的或者專有的平臺。必須滿足的是,這個平臺能夠提供部署和管理其虛擬存儲空間的自助服務(wù)接口。除此之外,SDS應(yīng)該包括:
自動化:簡化管理,降低維護存儲架構(gòu)的成本;
標準接口:提供應(yīng)用編程接口,用于管理、部署和維護存儲設(shè)備和存儲服務(wù);
虛擬數(shù)據(jù)路徑:提供塊、文件和對象的接口,支持應(yīng)用通過這些接口寫入數(shù)據(jù);
擴展性:無需中斷應(yīng)用,也能提供可靠性和性能的無縫擴展;
透明性:提供存儲消費者對存儲使用狀況及成本的監(jiān)控和管理。
SNIA認為,存儲服務(wù)的接口需要允許數(shù)據(jù)擁有者(存儲用戶)同時表達,對于數(shù)據(jù)和所需服務(wù)水準的需求。數(shù)據(jù)的需求,就是SDS建立在數(shù)據(jù)路徑(Data Path)的虛擬化,而控制路徑(Control Path)也需要被抽象化成為存儲服務(wù)。云、數(shù)據(jù)中心和存儲系統(tǒng),或者數(shù)據(jù)管理員能夠被用于部署這個服務(wù)(指Control Path)。
在SNIA對SDS的看法中,貢獻最大,也是最有價值的部分,應(yīng)該是SNIA關(guān)于Data Path(數(shù)據(jù)路徑)和Control Path(控制路徑),以及手動傳送數(shù)據(jù)請求和應(yīng)用通過元數(shù)據(jù)來傳送請求的的對比描述。它幫助大家清晰地了解了兩者的的區(qū)別,并描繪了未來理想的SDS的藍圖,為如何發(fā)展SDS指明了方向。
SDS包括數(shù)據(jù)路徑和控制路徑。數(shù)據(jù)路徑由以往的標準接口(塊、文件和對象)組成。那么控制路徑呢?在傳統(tǒng)存儲中,其實就是指存儲管理員為數(shù)據(jù)提供部署數(shù)據(jù)的服務(wù)。在使用傳統(tǒng)存儲的大多數(shù)情況下,每一個數(shù)據(jù)服務(wù)有著各自的管理接口。變更數(shù)據(jù)服務(wù),會導致所有存放在相應(yīng)虛擬存儲空間的數(shù)據(jù)都受到影響。
1.傳統(tǒng)方式下傳遞數(shù)據(jù)請求的方式
如圖上所示,存儲用戶的控制路徑是在帶外,通過傳統(tǒng)、人工的方式將數(shù)據(jù)請求傳遞給存儲管理員,例如對于數(shù)據(jù)保護、可用性、性能、安全性的要求。存儲管理員進入存儲管理界面,按存儲用戶的請求分配存儲資源。
這種情況是當前普遍存在的主流方式。其實是:存儲管理員定義。
這種存儲部署方式存在一個最大的問題,擴容或升級非常艱難。由于剛性架構(gòu)限制系統(tǒng)資源只能靜態(tài)分配,這就意味著后續(xù)新部署的資源難以歸入原先存儲體系。
2.理想方式下傳遞數(shù)據(jù)請求的方式
如上圖所示,理想的SDS,其傳遞數(shù)據(jù)請求的方式是:讓應(yīng)用通過元數(shù)據(jù)來請求相應(yīng)的數(shù)據(jù)服務(wù)。如,空間部署,數(shù)據(jù)保護(快照、克隆),數(shù)據(jù)高可用(容災(zāi)、雙活),性能,安全等。
理想的SDS實現(xiàn)了存儲基礎(chǔ)架構(gòu)的自動化機制,極大地降低了人工管理運維成本,數(shù)據(jù)請求需直接傳達至自動化軟件。它能夠直接應(yīng)對請求,分配應(yīng)用人員所需的存儲資源,而無需人工干預(yù)。存儲管理員可以從枯燥重復的建卷、映射卷等工作中,從疲于修補那些導致存儲服務(wù)水準降低的突發(fā)故障中,脫身出來,轉(zhuǎn)向更高級的任務(wù),例如定義存儲策略。
3.SNIA之SDS全局示意圖
存儲管理
將來自服務(wù)器本地的閃存盤、機械盤,存儲陣列,JBOD等存儲資源,通過存儲管理協(xié)議(如SMI-S等),進行特性描述和虛擬化,構(gòu)建出存儲資源池。
數(shù)據(jù)服務(wù)
存儲資源池化后,數(shù)據(jù)服務(wù)即可按照用戶對存儲服務(wù)級別(如金銀銅)的要求提供。數(shù)據(jù)服務(wù)包含:空間部署、數(shù)據(jù)保護、數(shù)據(jù)可用性、性能、數(shù)據(jù)安全性。
數(shù)據(jù)請求
存儲資源的使用者,如軟件開發(fā)人員通過數(shù)據(jù)管理接口(如CDMI),向SDS發(fā)起數(shù)據(jù)請求。由于SDS開放了豐富的API供調(diào)用,因此SDS能夠滿足用戶的數(shù)據(jù)請求,按照服務(wù)級別,提供相應(yīng)的存儲資源。
除了VMware、SNIA之外,Gartner、IDC,以及EMC、IBM、HP、DELL等,都提出了各自對SDS的定義或闡述。雖然每家對SDS的定義都各有不同,但易于擴展(主要指在線橫向擴展)、自動化、基于策略或者應(yīng)用的驅(qū)動都幾乎都成為大家定義中的必備特征。而這也是軟件定義數(shù)據(jù)中心的重要特征,只有具備自動化的能力,才能實現(xiàn)敏捷交付,簡單管理,節(jié)省部署和運維成本。自動化也成為各家SDS方案,是否愿意走向更高階段的試金石。
SDS的分類
軟件定義存儲的概念很大。我們所熟知的,存儲虛擬化、Server SAN、超融合架構(gòu)(HCI)都是SDS的一部分。
1. Control Plane(控制平面)
在SDS Control Plane這一層,比較著名的有:
VMware SPBM (Storage Policy Base Management, 基于存儲策略的管理);
OpenStack Cinder 。Cinder是OpenStack云平臺的一個組件,用來提供塊存儲服務(wù);
EMC ViPR。目標是實現(xiàn)EMC存儲、異構(gòu)存儲、商用硬件本地存儲資源的存儲虛擬化(包括互操作性);
ProphetStor(希智)的Federator;
FalconStor(飛康)的Freestor;
2.Data Plane(數(shù)據(jù)平面)
在SDS Data Plane這一層,比較復雜,組成部分較多。
Based on Commodity Hardware(基于商用的硬件)
其實,這一部分是最難分類的,種類繁多,命名還不容易。首先,筆者認為超融合架構(gòu)(HCI)是Server SAN的一個子集。
另外想說明的是,Based on Commodity Hardware這個分類里,包括了IDC分類中Virtual Storage Appliance(簡稱VSA,存儲控制器運行在虛機上)和Physical Storage Appliance兩類,注意在這個分類里,后者并不包括傳統(tǒng)的外置磁盤陣列。我們知道,控制平面與數(shù)據(jù)平面的分離之意義大于硬件與軟件的分離。因此,部署方式的這兩種不同,并沒有帶來本質(zhì)的差異。舉例來說,VSAN FS(VSAN File System)之于EVO:RAIL,NDFS(Nutanix Distributed File System)之于Nutanix一體機,差別僅在于是否與硬件捆綁,共同點在于都是基于商用的硬件,將分布式存儲資源池化,且基于Hypervisor。所以,VSAN, EVO:RAIL,Nutanix都屬于Server SAN的分類里,而且由于它們都不僅提供存儲資源,還提供計算資源,所以還屬于超融合架構(gòu)這個子類里。
超融合架構(gòu)里,比較著名的有:VMware VSAN或EVO:RAIL、EMC ScaleIO、Nutanix、Maxta、SimpliVity、Scale Computing、Pivot3;國內(nèi)有:華為FusionStorage、志凌海納SmartX、青云HCI、深信服HCI等;開源的有Open vStorage(類似Nutanix架構(gòu));
在Server SAN里,非超融合架構(gòu)(也即不提供計算資源)的有DELL Fluid Cache、HP StorVirtual、RedHat Inktank Ceph、Microsoft Storage Spaces等,以及達沃時代、StorWind、大道運行SSAN等;還包括分布式文件系統(tǒng),如GPFS、Lustre、Panasas等;
筆者認為Server SAN在它的原始定義里,應(yīng)該是一個橫向擴展的分布式存儲,它至少需要支持3個以上節(jié)點。這樣,對于那些僅支持兩個控制器做為集群的存儲,就不在Server SAN這個分類里了。不過,它們依然屬于軟件定義存儲這個大的分類里。這類存儲有:DataCore、Nexenta、國內(nèi)的InfoCore(信核),還有其他支持Solaris ZFS的存儲,如開源的FreeNAS、NAS4Free。
Traditional SAN/NAS(External Storage)
指的是傳統(tǒng)的外置磁盤陣列,包括SAN存儲或者NAS存儲。例如:EMC VNX,NetApp FAS系列,HDS HUS, DELL SC系列和PS系列,HP 3PAR,IBM V系列和DS系列,華為OceanStor系列等。這些存儲勁旅,不甘人后,也紛紛加入到SDS浪潮里,采取的方式有:
一是與Control Plane更多的API對接,例如,支持VMware SPBM之下的Virtual Volumes,再如,支持OpenStack Cinder等;
二是通過收購或自己研發(fā),去逐步實現(xiàn)SDS抽象(解耦)、池化、自動化的階段,典型的就有HP將LeftHand與原有硬件解耦,形成VSA版StorVirtual;NetApp推出Data ONTAP的VSA版ONTAP Edge VSA;IBM推出XIV的軟件版Spectrum Accelerate;EMC推出VNX的虛擬化版本 vVNX等。另外,DELL的Fluid Cache脫胎于之前收購的內(nèi)存虛擬化軟件RNA,本身已經(jīng)具備抽象池化的SDS基因。相信隨著SDS的浪潮,會有越來越多的傳統(tǒng)大牌存儲廠商推出類似的方案。
Cloud/Object Storage
它作為Data Plane的組成部分,實際上是以后端存儲的身份為VM/App提供存儲資源。
VM/App可以通過RESTful API等接口與對象存儲進行數(shù)據(jù)的輸入輸出,目前有三種RESTful API:亞馬遜S3、SNIA CDMI和OpenStack SWIFT。
從云存儲來看,隨著混合云的逐漸深入,用戶自然會期待在自己的私有云和公有云之間,能夠?qū)崿F(xiàn)除了在VM/App級別,在存儲級別,也能實現(xiàn)如同本地數(shù)據(jù)中心之間的同構(gòu)存儲之間的高級功能,例如備份、歸檔和容災(zāi)。此時,運行在公有云之上的VSA,也即虛擬存儲控制器(其實與在Hypervisor之上的VSA相類似),即可與本地存儲建立數(shù)據(jù)連接。
以NetApp的Cloud ONTAP為例。它是在AWS EC2的實例中運行Data ONTAP(FAS存儲的操作系統(tǒng))軟件,充當虛擬存儲控制器,對下接管AWS EBS作為自己的存儲空間,對上給運行業(yè)務(wù)應(yīng)用的EC2實例提供存儲服務(wù),包括塊(iSCSI)和文件(NFS、CIFS)。
我們知道,把NetApp的FAS存儲直接放到AWS或Microsoft Azure里去,是不太現(xiàn)實的。NetApp通過軟件定義的方法,把存儲控制器做成虛機,后端磁盤柜換成塊存儲服務(wù)(AWS EBS),為業(yè)務(wù)虛機提供專業(yè)的、高級的存儲服務(wù)。
類似的還有SoftNAS,也是以虛機方式運行在AWS EC2實例上,可以為運行業(yè)務(wù)應(yīng)用的EC2實例提供包括塊(iSCSI)和文件(NFS、CIFS)的存儲服務(wù)。
其實,談到軟件定義,無論SDN、SDS,都離不開控制平面Control Plane,數(shù)據(jù)平面Data Plane的提法?刂破矫尕撠煍(shù)據(jù)調(diào)度,實現(xiàn)自動化;而數(shù)據(jù)平面負責數(shù)據(jù)處理和數(shù)據(jù)優(yōu)化,負責抽象和虛池化。
最近兩年流行的概念 - Server SAN目前還只是圍繞著數(shù)據(jù)平面做些工作,是當前階段SDS的主要形態(tài),離理想的SDS尚有一些距離。不過,我們也注意到,已經(jīng)有一些Server SAN在控制平面做些工作了,例如嘗試與VMware SPBM(主要指Virtual Volume),或者OpenStack Cinder對接。
可以肯定的是,在最近幾年內(nèi),Server SAN仍然是充滿著創(chuàng)業(yè)生機的沃土,與之相關(guān)的初創(chuàng)公司(包括HCI,也即超融合架構(gòu))會如同雨后春筍般冒出來。但是,需要注意的是,在數(shù)據(jù)中心三大基礎(chǔ)架構(gòu)中,存儲相對于服務(wù)器和網(wǎng)絡(luò),是最難被替換的,因為它是數(shù)據(jù)的命脈。初創(chuàng)公司存儲的安全性(數(shù)據(jù)不丟失)、穩(wěn)定性是首要需要保證的。
核心關(guān)注:拓步ERP系統(tǒng)平臺是覆蓋了眾多的業(yè)務(wù)領(lǐng)域、行業(yè)應(yīng)用,蘊涵了豐富的ERP管理思想,集成了ERP軟件業(yè)務(wù)管理理念,功能涉及供應(yīng)鏈、成本、制造、CRM、HR等眾多業(yè)務(wù)領(lǐng)域的管理,全面涵蓋了企業(yè)關(guān)注ERP管理系統(tǒng)的核心領(lǐng)域,是眾多中小企業(yè)信息化建設(shè)首選的ERP管理軟件信賴品牌。
轉(zhuǎn)載請注明出處:拓步ERP資訊網(wǎng)http://www.ezxoed.cn/
本文標題:軟件定義存儲究竟是啥?
本文網(wǎng)址:http://www.ezxoed.cn/html/support/11121520093.html