一、前言
天津機(jī)輛軌道交通裝備有限責(zé)任公司(以下簡(jiǎn)稱天津裝備公司或公司)是中國(guó)北車股份有限公司的全資子公司,是中國(guó)鐵路機(jī)客貨車配件的生產(chǎn)、研發(fā)基地。企業(yè)始建于1909年,由清政府借款,德國(guó)人承建并代管,具有百年歷史。中華人民共和國(guó)成立后,企業(yè)歷經(jīng)六十年的發(fā)展和五次較大規(guī)模的技術(shù)改造和廠區(qū)擴(kuò)建,具備了數(shù)控加工、精密鍛造、熱處理等工藝手段,擁有了工藝制作、現(xiàn)代化檢測(cè)、計(jì)算機(jī)應(yīng)用等科技能力。
公司注冊(cè)資本為16600萬元,占地面積360000平方米,公司職工人數(shù)1506人,各類機(jī)械動(dòng)力設(shè)備1208臺(tái)(套),其中數(shù)控加工設(shè)備110臺(tái)、檢測(cè)設(shè)備174臺(tái)。主產(chǎn)品有彈簧、緩沖器、制動(dòng)機(jī)、增壓器、調(diào)速器。隨著公司產(chǎn)品結(jié)構(gòu)調(diào)整步伐的不斷加快,出口美國(guó)、俄羅斯箱體系列及多元產(chǎn)品工程機(jī)械漲緊裝置系列、無縫鋼管行業(yè)軋制工具系列、環(huán)保食品機(jī)械系列產(chǎn)品已穩(wěn)定規(guī)模,石油開采行業(yè)智能抽油機(jī)系列產(chǎn)品已經(jīng)量產(chǎn)。
2000年2月獲得質(zhì)量體系認(rèn)證;2005年12月獲得環(huán)境管理體系認(rèn)證和職業(yè)健康安全管理體系認(rèn)證;2007年5月計(jì)量試驗(yàn)中心通過了ISO/IEC17025國(guó)家實(shí)驗(yàn)室認(rèn)證。2011年通過了天津市企業(yè)技術(shù)中心和國(guó)家高新技術(shù)企業(yè)的認(rèn)定。2012年4月,北車彈簧研發(fā)中心在公司設(shè)立。2012年11月份通過IRIS體系認(rèn)證。
在行業(yè)地位不斷提升的前提下,信息化建設(shè)逐漸成為了公司發(fā)展的重中之重,在不斷深化建設(shè)中,天津裝備公司以技術(shù)創(chuàng)新為目標(biāo),采取行業(yè)標(biāo)準(zhǔn)方法方式予以改進(jìn)提升,不斷與時(shí)俱進(jìn)向現(xiàn)代化企業(yè)大步邁進(jìn)。
二、成果實(shí)施背景
隨著公司信息化發(fā)展,各種信息化應(yīng)用服務(wù)要求不斷增加,硬件服務(wù)器需求逐年上升,對(duì)系統(tǒng)安全性的要求不斷增強(qiáng),UPS不間斷電源,空調(diào)等配套附屬設(shè)施、服務(wù)器維護(hù)費(fèi)、軟件費(fèi)、電費(fèi)、服務(wù)人工等附加成本也隨著服務(wù)器的增加逐年上升。技術(shù)維護(hù)人員因維護(hù)量過大、收入偏低等原因也不斷流失,為應(yīng)用系統(tǒng)的使用留下諸多信息安全隱患。
此時(shí),如何為企業(yè)解決以上問題,節(jié)省企業(yè)信息化開支,增強(qiáng)企業(yè)信息化能力,如何以技術(shù)為手段開展管理道路,成為了管理信息部的首要任務(wù)。
作為管理信息化的技術(shù)人員,在信息化探索的道路上經(jīng)過多次大膽的嘗試,在技術(shù)測(cè)試中不斷總結(jié)經(jīng)驗(yàn)教訓(xùn),根據(jù)公司不斷發(fā)展的業(yè)務(wù)需求與經(jīng)濟(jì)效益和管理安全性進(jìn)行總體全面的考慮,進(jìn)行了無數(shù)次的調(diào)研與認(rèn)證,在2012年公司迎來了“中國(guó)北車信息化登高2號(hào)工程天津裝備公司財(cái)務(wù)業(yè)務(wù)一體化ERP項(xiàng)目”的契機(jī),結(jié)合公司ERP項(xiàng)目實(shí)施的需求,與公司發(fā)展對(duì)基礎(chǔ)架構(gòu)的虛擬化整合的方案已到了勢(shì)在必行的階段。
三、管理成果的主要內(nèi)容
1.項(xiàng)目的規(guī)劃
良好的方案設(shè)計(jì)是項(xiàng)目實(shí)施的關(guān)鍵,根據(jù)公司實(shí)際情況,管理信息部技術(shù)人員進(jìn)行了詳盡的規(guī)劃措施。
1.1 資金現(xiàn)狀與需求調(diào)研
公司對(duì)信息化投資在最近兩年可謂不遺余力,信息化投資率達(dá)到每年新增設(shè)備的57%,今年對(duì)ERP服務(wù)器的投資也是占了較大份額,但每次投資決定都經(jīng)過漫長(zhǎng)的研究與分析,信息化資金來之不易,作為技術(shù)人員我們?cè)谀玫劫Y金預(yù)算后都決心要將不多的預(yù)算用在刀刃上,所以根據(jù)ERP需求與未來使用要求應(yīng)為軟硬件做到一次投資,五年內(nèi)服務(wù)器及系統(tǒng)應(yīng)用可無需有再次太大投資。
1.2 方案選型
首先Citrix 公司給我公司提供了桌面虛擬化整體解決方案,并提供瘦客戶機(jī)進(jìn)行方案測(cè)試,在調(diào)研過程中發(fā)現(xiàn),由于公司區(qū)域比較廣,網(wǎng)絡(luò)線路形式多種多樣,有無線、網(wǎng)線、光纖、DSL,且?guī)捹|(zhì)量無法保證?蛻舳私鼛装倥_(tái),如有問題,維護(hù)人員將疲于奔命影響ERP等業(yè)務(wù)的正常實(shí)施。且瘦客戶機(jī)價(jià)格與市場(chǎng)上臺(tái)式機(jī)價(jià)格相近,若不用瘦客戶機(jī),采用公司原有機(jī)器,又因配置參差不齊,需再次進(jìn)行部分投資而與我公司需求不符。
HP公司為我公司原服務(wù)器供應(yīng)商,向我公司推薦微軟 Windows Server 2008 Hyper-V與VMware ESXserver服務(wù)器虛擬化方案。經(jīng)調(diào)研微軟 Windows Server 2008 Hyper-V方案中虛擬化功能只在X64位系統(tǒng)的Server 2008標(biāo)準(zhǔn)版、企業(yè)版、數(shù)據(jù)中心版中作為虛擬管理程序提供,且硬件需求至少為64位可激活帶VT技術(shù)。而對(duì)非微軟系統(tǒng)的支持較差,而我公司部分殺毒軟件網(wǎng)關(guān)及行為管理服務(wù)器恰恰是Linux底層系統(tǒng)服務(wù)的,所以又與公司需求相沖突,與需求不符。
而VMware ESXserver服務(wù)器虛擬化的出現(xiàn)彌補(bǔ)了各個(gè)方面的不足,并且經(jīng)調(diào)研VMware在服務(wù)器虛擬化上是市場(chǎng)占有率較高,成熟案例較多,易用性也較高,與我公司需求較符合。
至此選型有了方向,VMware服務(wù)器虛擬化在資金允許的情況下為首要選取方案。
1.3 供應(yīng)商招標(biāo)
根據(jù)公司《供應(yīng)商管理辦法》的規(guī)定,對(duì)ERP需求的服務(wù)器配置我們進(jìn)行了前期調(diào)研。IBM、DELL、HP公司在服務(wù)器及虛擬化方案軟硬件實(shí)施上均有較強(qiáng)的實(shí)施能力,并都給出了較完善的實(shí)施方案方法,能更好的根據(jù)公司需求做出符合未來五年規(guī)劃及系統(tǒng)應(yīng)用軟件的使用,并可標(biāo)準(zhǔn)化。
后根據(jù)公司采購(gòu)流程進(jìn)行了招標(biāo)采購(gòu),在同一基礎(chǔ)上,三個(gè)公司都做出了較完善的準(zhǔn)備,通過樣機(jī)測(cè)試,兼容性比拼等方式進(jìn)行了比較與測(cè)試,測(cè)試根據(jù)分?jǐn)?shù)評(píng)判,最終選取IBM公司以成熟的VMware ESXserver作為實(shí)施軟件,不僅能達(dá)到ERP軟件要求的最高功能,而且能確保創(chuàng)新項(xiàng)目《數(shù)據(jù)中心基礎(chǔ)架構(gòu)虛擬化整合平臺(tái)》,為所有服務(wù)器提供穩(wěn)定與兼容性并存的易用性平臺(tái),拔得了招標(biāo)頭籌。
1.4 規(guī)劃實(shí)施要求
于是在借助ERP項(xiàng)目開展后硬件資源需求的前提下,根據(jù)公司實(shí)際在北車集團(tuán)各兄弟企業(yè),我公司率先創(chuàng)新使用服務(wù)器虛擬化平臺(tái),大膽提出利用ERP項(xiàng)目新購(gòu)服務(wù)器,建立《數(shù)據(jù)中心基礎(chǔ)架構(gòu)虛擬化整合平臺(tái)》,組建服務(wù)器虛擬化群集,安裝VMware vSphere服務(wù)器虛擬化軟件,將信息一體化項(xiàng)目的ERP、PLM應(yīng)用、數(shù)據(jù)、報(bào)表、測(cè)試和舊有過保修期的服務(wù)器,及隱患嚴(yán)重,但極為重要的14臺(tái)應(yīng)用服務(wù)器通過虛擬化技術(shù)整合到三臺(tái)新服務(wù)器群集中,并最終可利用三臺(tái)服務(wù)器群集,達(dá)到可虛擬整合25臺(tái)服務(wù)器使用的目的。
逐步形成只需一人維護(hù),即可充分發(fā)揮服務(wù)器所有資源,并保證服務(wù)器應(yīng)用的安全使用,降低能源使用率。使因服務(wù)器老舊損毀,丟失數(shù)據(jù)等原因造成的業(yè)務(wù)停頓的隱患逐步消失。
增加管理圖像化,維護(hù)人員可通過VMware vSphere服務(wù)器虛擬化軟件產(chǎn)生的圖形報(bào)表掌握服務(wù)器狀況,靈活調(diào)整服務(wù)器配置。
2.網(wǎng)絡(luò)拓?fù)浣?/strong>
虛擬化技術(shù)的引入,不會(huì)對(duì)現(xiàn)有的網(wǎng)絡(luò)架構(gòu)做本質(zhì)上的顛覆,原先的架構(gòu)仍然是延續(xù)的,只是在數(shù)據(jù)中心的基礎(chǔ)設(shè)施方面,大大減少了需要維護(hù)和管理的設(shè)備,如服務(wù)器、交換機(jī)、機(jī)架、網(wǎng)線、UPS、空調(diào)等等,而且安全性也有增加。
圖1 網(wǎng)絡(luò)拓?fù)?/p>
3.方案構(gòu)成
3.1 硬件實(shí)施部分
使用用于服務(wù)器整合的高性能服務(wù)器。
對(duì)現(xiàn)有 3 臺(tái) IBM x3850x5 進(jìn)行擴(kuò)容,根據(jù)前期規(guī)劃的要求,使這3臺(tái) server 每臺(tái)達(dá)到虛擬化 10~15 臺(tái)虛擬機(jī)的配置要求,然后安裝虛擬化軟件,以這 3 臺(tái) server 為基礎(chǔ)搭建虛擬化架構(gòu)。
選擇這 3 臺(tái) x3850x5 的目的很明確,就是盡量降低購(gòu)買成本,充分利用現(xiàn)有資源。并且 x3850x5 的擴(kuò)展性還是比較強(qiáng)的,經(jīng)過有計(jì)劃的擴(kuò)容之后,基本上可以達(dá)到虛擬化整合的初期效果。
這 3 臺(tái) x3850x5 服務(wù)器的配置如下:
四個(gè) Intel 6 核 Xeon E7-4807 處理器(1.86GHz,18M 緩存),配置 4 塊內(nèi)存板,128GB(16x8GB) 1066MHz DDR3 內(nèi)存,標(biāo)配 4 個(gè) 2.5" SAS 熱插拔硬盤托架,標(biāo)配 M5015 RAID 卡,主機(jī)帶兩個(gè)千兆以太網(wǎng)端口,標(biāo)配 2 個(gè) 1975W熱插拔電源(帶 2 根 PDU 電源線), 4U 機(jī)架式,DVDRW 光驅(qū),2*8GB HBA。
圖2 物理主機(jī)在虛擬系統(tǒng)內(nèi)的信息顯示
3.2 軟件部分
主要配置以“12+1”方式體現(xiàn),其中“12”指的是 12 套 VMware 虛擬架構(gòu)套件企業(yè)增強(qiáng)版(VMware vSphere5 Enterprise Plus)使用授權(quán);“1”指的是 1 套 VMware vCenter Management Server 使用授權(quán)。其中VMware VSPHERE 套件按照 CPU 數(shù)量計(jì)算 license,一個(gè) license 管理 1個(gè) CPU;
按照 3 臺(tái) x3850x54 計(jì)算,每臺(tái) x3850x5 是 4 顆 CPU,需要采購(gòu) 12 套VMware VSPHERE 虛擬化套件。另外需要單獨(dú)采購(gòu)一套 VMware vCenter 管理軟件。根據(jù)需要可選購(gòu) VMware PSO 部門提供的專業(yè)服務(wù)通過本服務(wù),可以掌握如何根據(jù)實(shí)際情況做 vSphere 的高性能設(shè)定,掌握 vSphere 的基本技術(shù)和最佳實(shí)踐經(jīng)驗(yàn);VMware 提供 2 臺(tái) ESX server 服務(wù)器樣機(jī)的設(shè)定,可以模擬修改樣機(jī)的設(shè)定,根據(jù)實(shí)際情況做一定性能的設(shè)定。配置一套 vCenter Management Server;可提供 4 天的用戶現(xiàn)場(chǎng) PoC(概念驗(yàn)證)支持,便于在項(xiàng)目正式開始實(shí)施前,對(duì)虛擬環(huán)境進(jìn)行試用與演練,同過該 PoC,可讓以后進(jìn)行維護(hù)支持的工程師掌握更多的操作技能與經(jīng)驗(yàn)。
4.實(shí)施主要舉措
4.1 具體虛擬化服務(wù)分析實(shí)施
分析現(xiàn)有服務(wù)器的應(yīng)用層次,并根據(jù)重要性在不影響正常工作業(yè)務(wù)的情況下做好服務(wù)器虛擬化系統(tǒng)的創(chuàng)建、遷移工作,通過VMware vSphere服務(wù)器虛擬化軟件創(chuàng)建ERP、PLM各個(gè)虛擬服務(wù)器系統(tǒng),并將各個(gè)舊有保修到期,及有隱患服務(wù)器遷移至虛擬化服務(wù)器群集之中去,合理配置每臺(tái)服務(wù)器承載虛擬機(jī)的數(shù)量,使其虛擬機(jī)使用率不超過本身最大使用率的70%,這樣通過技術(shù)手段對(duì)物理服務(wù)器群集做虛擬化高可用HA配置,達(dá)到動(dòng)態(tài)保護(hù),可在運(yùn)行中承受一臺(tái)物理機(jī)受損而數(shù)據(jù)系統(tǒng)照常運(yùn)行不受損失的目的。
4.2 管理制度建立
制定了《天津裝備公司-數(shù)據(jù)中心機(jī)房管理辦法》、《服務(wù)器機(jī)房登記制度》和《IBM公司服務(wù)器季度服務(wù)巡檢表》、《虛擬服務(wù)器操作使用規(guī)范》。
4.3 正版軟件安裝
安裝 VMware 虛擬架構(gòu)套件企業(yè)增強(qiáng)版(VMware vSphere5 Enterprise Plus),并使用授權(quán)注冊(cè)其中VMware VSPHERE 套件,按照 CPU 數(shù)量計(jì)算 license,一個(gè) license 管理 1個(gè) CPU;
安裝硬件分區(qū)許可,并根據(jù)規(guī)劃,為虛擬空間進(jìn)行物理分配,為公司存儲(chǔ)、虛擬化留出使用空間。
安裝正版操作系統(tǒng),激活相關(guān)系統(tǒng),將公司所有涉及虛擬化系統(tǒng)的服務(wù)全部操作系統(tǒng)正版化。避免版權(quán)糾紛。
4.4 信息化安全管理
通過公司原有備份軟件Symantec NetBackup Enterprise Server V7.5,對(duì)服務(wù)器虛擬化軟件中的重要虛擬機(jī)系統(tǒng)進(jìn)行每日備份,利用過保的舊有服務(wù)器、存儲(chǔ)設(shè)備進(jìn)行虛擬機(jī)鏡像備份文件的存儲(chǔ),并根據(jù)指定制度作定時(shí)數(shù)據(jù)驗(yàn)證,與數(shù)據(jù)災(zāi)難應(yīng)急練習(xí),為信息化系統(tǒng)安全作出全面的保障。
圖3 對(duì)虛擬主機(jī)及物理主機(jī)進(jìn)行策略備份
4.5 項(xiàng)目實(shí)施進(jìn)度
4.5.1 1月份具體實(shí)施進(jìn)度
2013年1月,安裝虛擬服務(wù)軟件、建立操作系統(tǒng),將ERP、PLM項(xiàng)目所需服務(wù)器創(chuàng)建安裝至虛擬化群集中,其中ERP項(xiàng)目應(yīng)用服務(wù)器、數(shù)據(jù)服務(wù)器、報(bào)表服務(wù)器、測(cè)試服務(wù)器共四臺(tái)。PLM應(yīng)用、數(shù)據(jù)服務(wù)器共兩臺(tái)。節(jié)省服務(wù)器三臺(tái)。
4.5.2 2月份具體實(shí)施進(jìn)度
2013年2月,遷移已有DNC服務(wù)器一臺(tái)、DNS服務(wù)器一臺(tái)、信息平臺(tái)服務(wù)器一臺(tái)、OA服務(wù)器一臺(tái)。節(jié)省服務(wù)器共四臺(tái)。
4.5.3 3月份具體實(shí)施進(jìn)度
2013年3月,整理公司已有數(shù)據(jù)并遷移FTP服務(wù)器一臺(tái),存儲(chǔ)服務(wù)器一臺(tái)。
4.5.4 4月份具體實(shí)施進(jìn)度
2013年4月遷移用友服務(wù)器、抽油機(jī)事業(yè)部、國(guó)際貿(mào)易部、采購(gòu)部數(shù)據(jù)共享平臺(tái)服務(wù)器各一臺(tái)。節(jié)省服務(wù)器四臺(tái)臺(tái)。
4.5.5 計(jì)劃外進(jìn)度的實(shí)施
利用舊有服務(wù)器安裝Symantec NetBackup Enterprise Server V7.5存儲(chǔ)備份系統(tǒng),并制定策略,定時(shí)對(duì)已安裝虛擬服務(wù)器進(jìn)行鏡像備份,并對(duì)可利用舊有服務(wù)器搭建了郵箱服務(wù)平臺(tái)。
節(jié)省計(jì)劃內(nèi)設(shè)備開支。
對(duì)于測(cè)試階段所需模擬機(jī),測(cè)試機(jī),可對(duì)在虛擬機(jī)平臺(tái)根據(jù)需求靈活配置,在需要應(yīng)用時(shí)啟動(dòng),建立測(cè)試環(huán)境,用后只需保留還模板鏡像,即可停用,下次再用還可再次快速組建,不占資源。
圖4 可靈活配置的虛擬主機(jī)
4.6 整體五年規(guī)劃
確定公司信息化服務(wù)器硬件購(gòu)買與發(fā)展方向,做不斷擴(kuò)大虛擬化集群的準(zhǔn)備,利用虛擬服務(wù)技術(shù)做好五年規(guī)劃。
四、數(shù)據(jù)中心基礎(chǔ)架構(gòu)虛擬化整合實(shí)施后的成果和展望
隨著虛擬服務(wù)數(shù)據(jù)中心基礎(chǔ)架構(gòu)的形成,在幾個(gè)月的運(yùn)行中與預(yù)測(cè)規(guī)劃的效果一直,符合公司信息化發(fā)展與未來適用的要求,具體成果如下:
1.成本大幅降低
降低總體擁有成本(TCO)、提高投資回報(bào)率(ROI)通過服務(wù)器整合,控制和減少物理服務(wù)器的數(shù)量,明顯提高每個(gè)物理服務(wù)器及其 CPU 的資源利用率,從而降低硬件成本。
降低運(yùn)營(yíng)和維護(hù)成本,包括數(shù)據(jù)中心空間、機(jī)柜、網(wǎng)線,耗電量,冷氣空調(diào)和人力成本等。
2.運(yùn)營(yíng)效率大幅增加
加快新服務(wù)器和應(yīng)用的部署,大大降低服務(wù)器重建和應(yīng)用加載時(shí)間。主動(dòng)地提前規(guī)劃資源增長(zhǎng),這樣對(duì)客戶和應(yīng)用的需求響應(yīng)快速,不需要象以前那樣,需要長(zhǎng)時(shí)間的采購(gòu)流程,然后進(jìn)行嘗試不需要象以前那樣,硬件維護(hù)需要數(shù)天/周的變更管理準(zhǔn)備和 1-3 小時(shí)維護(hù)窗口,現(xiàn)在可以進(jìn)行快速的硬件維護(hù)和升級(jí)。
3.系統(tǒng)安全性大幅度提高
由于采用了虛擬化技術(shù)的高級(jí)功能,并配置虛擬化高可用性功能HA,使業(yè)務(wù)系統(tǒng)脫離了單臺(tái)物理硬件的束縛,可以實(shí)現(xiàn)更高級(jí)別的業(yè)務(wù)連續(xù)性要求,提升了系統(tǒng)安全性、可靠性。通過虛擬化技術(shù),降低了物理硬件的故障影響力,減少了硬件的安全隱患。通過虛擬化整合,減少了設(shè)備的接入數(shù)量,安全防范的范圍能夠得到更有效地控制。
4.陳舊硬件和操作系統(tǒng)的投資保護(hù)
虛擬化平臺(tái)具有更廣泛的操作系統(tǒng)(OS)兼容性,不再擔(dān)心舊系統(tǒng)的無法使用,并且通過自動(dòng)更新功能實(shí)現(xiàn)維護(hù)和升級(jí)等一系列問題。
5.為將來的集中網(wǎng)絡(luò)存儲(chǔ)提供可能
對(duì)于由于成本或者其他原因沒有接入到存儲(chǔ)網(wǎng)絡(luò)(SAN, iSCSi 和 NAS)的服務(wù)器,整合后物理服務(wù)器數(shù)量減少,可以考慮接入到存儲(chǔ)網(wǎng)絡(luò),這樣充分利用網(wǎng)絡(luò)存儲(chǔ)的優(yōu)勢(shì),將這些分散的數(shù)據(jù)集中管理備份,為這些服務(wù)器和應(yīng)用的以后的容災(zāi)打下基礎(chǔ)。同時(shí),通過虛擬機(jī)的特有功能和網(wǎng)絡(luò)存儲(chǔ)的有效結(jié)合,提高了這些應(yīng)用的可用性,移動(dòng)性和靈活性。
對(duì)公司原計(jì)劃購(gòu)買的UPS設(shè)備,空調(diào)降溫設(shè)備進(jìn)行暫緩購(gòu)買,并逐步減少舊有服務(wù)器的全功率運(yùn)行,做冷備份處理,節(jié)省大量能源,降低了能耗。
圖5 天津裝備公司虛擬化數(shù)據(jù)中心圖表
五、總結(jié)
通過在天津機(jī)輛軌道交通裝備有限責(zé)任公司實(shí)施數(shù)據(jù)中心基礎(chǔ)架構(gòu)虛擬化整合后,大量設(shè)備整合成動(dòng)態(tài)的虛擬化資源池,從而大大提高資源利用率,降低成本,增強(qiáng)了系統(tǒng)和應(yīng)用的可用性,提高系統(tǒng)的靈活性和快速響應(yīng),實(shí)現(xiàn)服務(wù)器效率的大幅提升,并使系統(tǒng)管理員可以靈活的運(yùn)用虛擬化技術(shù),為公司進(jìn)行服務(wù)器測(cè)試與調(diào)配,避免因人為調(diào)動(dòng)給公司造成安全損失,在整體信息化規(guī)劃的前提下,天津裝備公司逐漸對(duì)服務(wù)器使用標(biāo)準(zhǔn)化,為未來信息化系統(tǒng)的升級(jí)打下了良好基礎(chǔ),可隨時(shí)迎接新的信息化項(xiàng)目的開展。
轉(zhuǎn)載請(qǐng)注明出處:拓步ERP資訊網(wǎng)http://www.ezxoed.cn/
本文標(biāo)題:數(shù)據(jù)中心基礎(chǔ)架構(gòu)虛擬化整合的實(shí)施
本文網(wǎng)址:http://www.ezxoed.cn/html/consultation/10839314808.html