隨著信息化技術(shù)的發(fā)展與應(yīng)用,為各行業(yè)的企業(yè)在業(yè)務(wù)發(fā)展上帶來了最直接的機(jī)會。同時(shí)也產(chǎn)生了大量的業(yè)務(wù)相關(guān)數(shù)據(jù),這些數(shù)據(jù)可能會涉及到企業(yè)的財(cái)務(wù)信息、營銷數(shù)據(jù)、客戶資料等等。
這些數(shù)據(jù)的留存是否會對業(yè)務(wù)發(fā)展提供有力的幫助呢?據(jù)相關(guān)機(jī)構(gòu)估算,在財(cái)富500強(qiáng)的企業(yè)中,平均每一家企業(yè)都會保存有最近7至10年的客戶數(shù)據(jù),而這些數(shù)據(jù)往往未得到充分的利用。與此同時(shí),這類的數(shù)據(jù)還在大幅度的增長。據(jù)經(jīng)濟(jì)學(xué)家最近的一項(xiàng)研究顯示,人類在2005年中創(chuàng)造了大約150 EB字節(jié)的數(shù)據(jù)信息,而2011年達(dá)到了1800 EB字節(jié)。同樣,市場研究公司IDC表示,數(shù)字內(nèi)容將會呈現(xiàn)每18個(gè)月翻倍增長的趨勢。Gartner預(yù)測表示,未來將有多達(dá)80%的企業(yè)數(shù)據(jù)趨于非結(jié)構(gòu)化,并且數(shù)據(jù)來源涵蓋了傳統(tǒng)和非傳統(tǒng)渠道。
大數(shù)據(jù)面臨的兩個(gè)挑戰(zhàn)
近幾年來,隨著互聯(lián)網(wǎng)與信息技術(shù)的發(fā)展,全球數(shù)據(jù)量呈現(xiàn)了爆炸式的增長。移動通信技術(shù)、無線設(shè)備、社交網(wǎng)絡(luò)、遠(yuǎn)程協(xié)作以及基于云的諸多服務(wù)都是導(dǎo)致數(shù)據(jù)呈幾何增長的主要原因?梢哉f,數(shù)據(jù)的爆炸式增長為全球各行業(yè)均帶來了管理上的問題。
例如,在電信行業(yè)的呼叫數(shù)據(jù)記錄管理、金融行業(yè)的交易數(shù)據(jù)和客戶資料管理、零售行業(yè)的供應(yīng)鏈管理以及制造行業(yè)的業(yè)務(wù)績效管理等等。對于企業(yè)用戶來說,大數(shù)據(jù)的來臨也無形中增加了他們所需承擔(dān)的責(zé)任以及成本。企業(yè)必須保持這些數(shù)據(jù)在很長一段時(shí)間內(nèi)的可用性,并滿足這些龐大數(shù)據(jù)量在存儲方面的需求。這就導(dǎo)致了企業(yè)需要采購和維護(hù)所需的硬件設(shè)備,并且還要不斷的進(jìn)行監(jiān)督與管理。
那么,企業(yè)利用這些海量的數(shù)據(jù)能做什么呢?許多敏銳的管理者已經(jīng)意識到,這些數(shù)據(jù)可能會成為企業(yè)的真正優(yōu)勢,為業(yè)務(wù)運(yùn)營提供超越競爭對手的洞察力。但隨之而來的問題就是數(shù)據(jù)處理的能力和速度。數(shù)據(jù)的運(yùn)算速度會受到物理設(shè)備極限能力的限制,從而影響從數(shù)據(jù)庫中訪問數(shù)據(jù)和運(yùn)算指令所需的時(shí)間。這意味著,一個(gè)復(fù)雜的計(jì)算將無法實(shí)時(shí)完成,可能會持續(xù)幾個(gè)小時(shí)甚至幾天。
另一方面,運(yùn)算速度并不是決定大數(shù)據(jù)發(fā)展的唯一關(guān)鍵要求。當(dāng)前的大數(shù)據(jù)無處不在,并且其大多來自于非結(jié)構(gòu)化的外部數(shù)據(jù)。企業(yè)需要尋找一個(gè)可以幫助其獲取、分析、治理和信息共享的工具。在Gartner 2011技術(shù)成熟度曲線(Hype Cycle)中我們看到,大數(shù)據(jù)技術(shù)正在日趨成熟并上升到了“過熱期”階段。在企業(yè)需求更快的數(shù)據(jù)訪問速度時(shí),也希望能夠迅速了解到這些數(shù)據(jù)可用來做什么。這就涉及到了大數(shù)據(jù)在企業(yè)應(yīng)用中的兩個(gè)主要挑戰(zhàn),實(shí)時(shí)數(shù)據(jù)分析與實(shí)時(shí)業(yè)務(wù)響應(yīng)。
挑戰(zhàn)之一“實(shí)時(shí)數(shù)據(jù)分析”
大約在15年前,當(dāng)時(shí)還沒有現(xiàn)在的“商業(yè)智能(BI)”,而是稱為“決策支持”。那個(gè)時(shí)候,企業(yè)已經(jīng)可以從他們的數(shù)據(jù)中獲得有用的業(yè)務(wù)發(fā)展洞察,直到最近數(shù)據(jù)量爆炸增長的來臨,才使得企業(yè)在獲取數(shù)據(jù)實(shí)時(shí)分析時(shí)面臨了較大的阻力。
在2012年達(dá)沃斯世界經(jīng)濟(jì)論壇的報(bào)告中寫道:“現(xiàn)在企業(yè)中的分析師們希望能夠制定他們所需求的分析方案并親自制作和運(yùn)用報(bào)告,希望在運(yùn)作時(shí)能夠盡量少的被IT部門參與。他們覺得對于IT的依賴大大減慢了他們的工作效率。同時(shí),他們還希望數(shù)據(jù)能夠可視化。因?yàn)槟壳捌髽I(yè)和消費(fèi)者比以往任何時(shí)候都更加期望能夠獲取到與數(shù)據(jù)相關(guān)度較高可視化報(bào)告,這不僅要體現(xiàn)在圖表、圖形和熱點(diǎn)圖等形式,還需要能夠設(shè)計(jì)具備偏好的自定義形式。”
由此不難看出,明確的數(shù)據(jù)點(diǎn)和分析結(jié)果對于企業(yè)來說是非常有價(jià)值的。但現(xiàn)今的分析僅局限在企業(yè)的現(xiàn)有數(shù)據(jù)庫還不夠,還需要保持?jǐn)?shù)據(jù)與當(dāng)前社會乃至全球的相關(guān)性。這意味著企業(yè)需要從社交媒體、地理位置、CRM系統(tǒng)、政府的公開數(shù)據(jù)、手機(jī)信息等非專有的渠道獲取數(shù)據(jù),進(jìn)行額外的分析。
另一方面,對于實(shí)時(shí)分析來說,當(dāng)前的移動應(yīng)用潛力也才剛剛開始出現(xiàn),其移動分析或?qū)⒈阮A(yù)期的影響更加深遠(yuǎn)。例如,廣告或其他有針對性的目的可以對移動設(shè)備用戶的實(shí)時(shí)行為作出分析。而在移動應(yīng)用分析方面,那些有大量移動辦公人員的企業(yè)可以針對員工移動設(shè)備的使用作出分析,其中可能會包括數(shù)據(jù)、信息和地理位置等等。除卻移動應(yīng)用外,實(shí)時(shí)分析還可利用從無線傳感器網(wǎng)絡(luò)、道路網(wǎng)絡(luò)監(jiān)測、空中交通及鐵路等途徑獲取的數(shù)據(jù)。
總之,任何企業(yè)的目標(biāo)都是希望獲得一個(gè)真實(shí)的且實(shí)時(shí)的數(shù)據(jù)分析,通過大數(shù)據(jù)尋找新的思路。因?yàn)榇髷?shù)據(jù)往往涉及了多年的歷史管理數(shù)據(jù),企業(yè)可以從中提高決策、加速性能并提高生產(chǎn)力和效率。
挑戰(zhàn)之二“實(shí)時(shí)業(yè)務(wù)響應(yīng)”
現(xiàn)階段企業(yè)自身也正在以驚人的速度發(fā)展業(yè)務(wù)。企業(yè)越來越需要對影響他們業(yè)務(wù)的事件做出更快的反應(yīng)。通過對數(shù)據(jù)的分析,企業(yè)能夠找出提高其業(yè)務(wù)規(guī)劃趨勢和預(yù)測的模式,以減少在處理顧客需求和投訴方面的響應(yīng)時(shí)間。同時(shí),也可以及時(shí)向銷售部門提供所需的信息。
為實(shí)現(xiàn)企業(yè)縮短響應(yīng)時(shí)間的目標(biāo),企業(yè)必須要在事件發(fā)生時(shí)作出實(shí)時(shí)的交易信息評估,基于實(shí)時(shí)數(shù)據(jù)進(jìn)行動態(tài)的問題處理。然而說著簡單,做起來卻不一定容易。隨著大數(shù)據(jù)的來臨,現(xiàn)有的業(yè)務(wù)數(shù)據(jù)量已遠(yuǎn)超過了傳統(tǒng)磁盤系統(tǒng)和數(shù)據(jù)倉庫所能承受的最大處理能力。
為此才引出了下面的話題——內(nèi)存計(jì)算技術(shù)。在傳統(tǒng)的運(yùn)算方式中,數(shù)據(jù)是從磁盤驅(qū)動器被載入到內(nèi)存中的,內(nèi)存則主要放置正在處理的數(shù)據(jù)信息。而內(nèi)存計(jì)算卻是將所有的數(shù)據(jù)都保存在內(nèi)存中,處理器直接從內(nèi)存讀取數(shù)據(jù)。相比傳統(tǒng)的磁盤來說,內(nèi)存的讀取速率更高,處理速度更快。對于一個(gè)企業(yè)來說,內(nèi)存技術(shù)的采用標(biāo)志著其整體業(yè)務(wù)的轉(zhuǎn)折,特別是在處理大數(shù)據(jù)方面。
在最近幾年中,中央處理器和內(nèi)存的價(jià)格已呈現(xiàn)明顯下滑,同時(shí)每單位內(nèi)存的可用性和能力也呈現(xiàn)了顯著增長。這種增長為海量數(shù)據(jù)的存儲方式帶來了重新思考的空間。同時(shí),數(shù)據(jù)存儲方式的改變也將對企業(yè)應(yīng)用產(chǎn)生重要的影響并最終影響企業(yè)的運(yùn)營方式。內(nèi)存技術(shù)將帶來企業(yè)管理的全新時(shí)代,管理人員可以根據(jù)他們的決策對復(fù)雜的業(yè)務(wù)數(shù)據(jù)進(jìn)行實(shí)時(shí)分析,這對于大型IT系統(tǒng)來說無疑具備里程碑式的意義。
另一方面,在傳統(tǒng)的基于磁盤的系統(tǒng)中,數(shù)據(jù)信息從運(yùn)營系統(tǒng)中被提取并構(gòu)建在不同的數(shù)據(jù)倉庫系統(tǒng)進(jìn)行分析,這意味著在數(shù)據(jù)采集和生成過程中存在明顯的延時(shí)。而隨著內(nèi)存技術(shù)的可用,業(yè)務(wù)數(shù)據(jù)都在單一的綜合數(shù)據(jù)庫中,以處理每日所有的交易和更新,并應(yīng)對實(shí)時(shí)響應(yīng)分析需求。由于內(nèi)存技術(shù)允許從內(nèi)存中直接訪問數(shù)據(jù),所以會比傳統(tǒng)的磁盤系統(tǒng)具備更快的結(jié)果返回速度。同時(shí),更新數(shù)據(jù)庫所花費(fèi)的時(shí)間也顯著減少,系統(tǒng)也可以在同一時(shí)間處理更多的查詢操作。
雖然內(nèi)存計(jì)算技術(shù)并不是一個(gè)全新的技術(shù),但其現(xiàn)在已發(fā)展成為一個(gè)可供企業(yè)真正使用的技術(shù)。隨著處理速度的巨大進(jìn)步,在質(zhì)量查詢、商業(yè)洞察以及內(nèi)存中的數(shù)據(jù)庫管理系統(tǒng)將能夠達(dá)到10至20倍的提升,這是傳統(tǒng)的磁盤設(shè)備所無法相比的。同時(shí),隨著現(xiàn)階段硬件價(jià)格的優(yōu)勢和軟件的創(chuàng)新,已使企業(yè)有可能利用內(nèi)存計(jì)算技術(shù)在幾秒的時(shí)間內(nèi)對大量的數(shù)據(jù)進(jìn)行篩選、關(guān)聯(lián)和更新。
此外,談到內(nèi)存技術(shù)對行業(yè)的影響,可以說其從消費(fèi)產(chǎn)品和零售業(yè),到制造業(yè)和金融服務(wù)業(yè)的運(yùn)作方面具有很大的潛力。
消費(fèi)產(chǎn)品企業(yè)可以使用內(nèi)存技術(shù)來管理他們的供應(yīng)商、跟蹤產(chǎn)品和管理促銷活動,并且對保修期內(nèi)產(chǎn)品的缺陷進(jìn)行分析。零售企業(yè)可以跨越多個(gè)地域管理店面運(yùn)營、進(jìn)行網(wǎng)點(diǎn)銷售分析、進(jìn)行多渠道的定價(jià)分析和對損壞、變質(zhì)及退回的產(chǎn)品進(jìn)行跟蹤。制造企業(yè)可以通過內(nèi)存技術(shù)確保業(yè)務(wù)績效管理、對生產(chǎn)和維修進(jìn)行分析并進(jìn)行實(shí)時(shí)的資產(chǎn)利用率研究。金融服務(wù)公司可以進(jìn)行對沖基金交易分析,如對貨幣、股票、衍生性金融商品和其他證劵的客戶風(fēng)險(xiǎn)管理。利用從內(nèi)存中獲取的信息,企業(yè)可以基于市場交易的現(xiàn)狀作出實(shí)時(shí)系統(tǒng)的風(fēng)險(xiǎn)管理和報(bào)告。
內(nèi)存計(jì)算技術(shù)為業(yè)務(wù)帶來的益處
從內(nèi)存計(jì)算對各行業(yè)的影響不難看出,其在許多領(lǐng)域都會產(chǎn)生令用戶印象深刻的益處。其中最重要的是節(jié)約成本、提高效率和實(shí)時(shí)性。
在成本的節(jié)約方面,主要體現(xiàn)在內(nèi)存的運(yùn)行功耗和占用資源比傳統(tǒng)磁盤要低。據(jù)調(diào)查顯示,數(shù)據(jù)庫管理目前占據(jù)了大多數(shù)企業(yè)IT預(yù)算的25%,甚至更多。由于內(nèi)存中的數(shù)據(jù)庫所使用的硬件系統(tǒng)比傳統(tǒng)磁盤數(shù)據(jù)庫所需功耗更低,因此它們可以大幅度降低硬件及維護(hù)成本。另外,由于內(nèi)存計(jì)算技術(shù)可以實(shí)現(xiàn)無中斷作業(yè),釋放了以前傳統(tǒng)數(shù)據(jù)庫為響應(yīng)報(bào)告請求而占用的系統(tǒng)資源,所以也減少了對公司整體IT環(huán)境的負(fù)擔(dān)。
在提高效率方面,內(nèi)存技術(shù)將使得那些依賴于頻繁數(shù)據(jù)更新的企業(yè)更加方便。遷移到內(nèi)存技術(shù)可使企業(yè)在IT架構(gòu)中刪除以前的傳統(tǒng)技術(shù)層,降低復(fù)雜性及傳統(tǒng)系統(tǒng)所需要的基礎(chǔ)設(shè)施。通過內(nèi)存計(jì)算技術(shù),企業(yè)數(shù)據(jù)檢索幾乎將在瞬間完成,使企業(yè)中的所有團(tuán)隊(duì)更有效率。同時(shí),內(nèi)存計(jì)算允許任何企業(yè)用戶輕松創(chuàng)建BI子集,方便各部門使用。企業(yè)用戶也不再需要IT部門的支持就可以獲取相關(guān)業(yè)務(wù)數(shù)據(jù)的洞察。
在實(shí)時(shí)性方面,內(nèi)存技術(shù)使得企業(yè)可以更容易的編制其業(yè)務(wù)數(shù)據(jù)的全面概述,而不是僅限于其數(shù)據(jù)倉庫中分門別類的數(shù)據(jù)子集。通過這個(gè)可見性的改進(jìn),企業(yè)可以從事件分析中實(shí)時(shí)進(jìn)行決策,以使他們的業(yè)務(wù)模式具備可預(yù)測性,擺脫傳統(tǒng)模式的被動響應(yīng)。
改寫“五分鐘”法則
隨著現(xiàn)今信息技術(shù)、互聯(lián)網(wǎng)、移動通信技術(shù)的成熟以及觸摸式智能手機(jī)、平板電腦、社交網(wǎng)絡(luò)等日新月異的產(chǎn)品出現(xiàn),人們對于技術(shù)的看法也發(fā)生了改變。如何更好的利用新技術(shù)優(yōu)化企業(yè)的業(yè)務(wù)?這是每個(gè)企業(yè)用戶都在考慮的問題。人們希望能通過一種方式,有效的搜索和篩選大量的聯(lián)機(jī)數(shù)據(jù)以獲取到有意義的信息。
無疑,內(nèi)存技術(shù)將成為實(shí)現(xiàn)數(shù)據(jù)快速處理的最佳方案,但是相比于基于磁盤的數(shù)據(jù)管理系統(tǒng)其成本也是高昂的。即便如此,那些最先采用內(nèi)存技術(shù)的企業(yè),在業(yè)務(wù)洞察力、效率和降低整體IT成本方面也將具備真正的優(yōu)勢。
追溯到1987年,Jim Gray與Gianfranco Putzolu發(fā)表了I/O 的“五分鐘法則”觀點(diǎn)。該觀點(diǎn)簡而言之就是,如果一條記錄被頻繁訪問,那么就應(yīng)該將其放到內(nèi)存中,否則的話就應(yīng)該保存在硬盤上按需訪問,而這個(gè)臨界點(diǎn)就是五分鐘。這個(gè)觀點(diǎn)的評估標(biāo)準(zhǔn)是根據(jù)成本投入判斷的,并且在20多年之后的內(nèi)存時(shí)代中又有專家再次提出,證明其依然有效。
時(shí)隔近30年,與現(xiàn)在相比,那時(shí)的內(nèi)存價(jià)格每GB超過5000美元,而現(xiàn)在已不足1美元了。此外,隨著大型多核處理器架構(gòu)的發(fā)展,再結(jié)合內(nèi)存成本的一再下降,可以說這兩個(gè)趨勢的出現(xiàn)為企業(yè)提供了一個(gè)轉(zhuǎn)型的時(shí)機(jī)。
在未來幾年內(nèi),隨著企業(yè)越加了解如何通過實(shí)時(shí)的大數(shù)據(jù)篩選所需之后,我們將會在各個(gè)領(lǐng)域看到越來越多的此類應(yīng)用。盡管現(xiàn)在的全球管理者們才剛剛開始學(xué)習(xí)如何應(yīng)付大數(shù)據(jù),但在不久的將來,我們將看到企業(yè)如何挖掘大數(shù)據(jù),并用它為企業(yè)創(chuàng)造更多的價(jià)值。
備注:本文為SAP公司在2012年世界經(jīng)濟(jì)論壇白皮書進(jìn)行改編。
核心關(guān)注:拓步ERP系統(tǒng)平臺是覆蓋了眾多的業(yè)務(wù)領(lǐng)域、行業(yè)應(yīng)用,蘊(yùn)涵了豐富的ERP管理思想,集成了ERP軟件業(yè)務(wù)管理理念,功能涉及供應(yīng)鏈、成本、制造、CRM、HR等眾多業(yè)務(wù)領(lǐng)域的管理,全面涵蓋了企業(yè)關(guān)注ERP管理系統(tǒng)的核心領(lǐng)域,是眾多中小企業(yè)信息化建設(shè)首選的ERP管理軟件信賴品牌。
轉(zhuǎn)載請注明出處:拓步ERP資訊網(wǎng)http://www.ezxoed.cn/
本文標(biāo)題:大數(shù)據(jù)落地引發(fā)BI變革 兩大挑戰(zhàn)揭秘
本文網(wǎng)址:http://www.ezxoed.cn/html/support/11121810973.html