信息時(shí)代的基本特征是數(shù)據(jù)和信息呈現(xiàn)爆炸發(fā)展的態(tài)勢(shì)。這一點(diǎn)在電子商務(wù)領(lǐng)域也得到了深刻的體現(xiàn)。隨著電子商務(wù)在各個(gè)行業(yè)特別是零售行業(yè)的迅猛發(fā)展，并發(fā)訪(fǎng)問(wèn)量快速增加，同時(shí)數(shù)據(jù)的類(lèi)型也呈現(xiàn)出繁雜多樣的發(fā)展趨勢(shì)。以淘寶網(wǎng)和天貓商城為例，在2012年11月11日這一天時(shí)間訪(fǎng)問(wèn)量就突破了2．13億次，而且基本上是獨(dú)立用戶(hù)，同時(shí)線(xiàn)上交易額達(dá)到191億元人民幣，創(chuàng)下了單日網(wǎng)上交易新記錄，顯示出電子商務(wù)業(yè)的強(qiáng)勁發(fā)展勢(shì)頭。商品交易之外，很多服務(wù)行業(yè)或國(guó)家行政部門(mén)也加大了網(wǎng)上交易平臺(tái)建設(shè)力度，例如火車(chē)票的網(wǎng)上訂購(gòu)、行政事業(yè)收費(fèi)的網(wǎng)上交易等等。業(yè)務(wù)量和業(yè)務(wù)類(lèi)型的快速增長(zhǎng)帶來(lái)的是海量的信息數(shù)據(jù)，諸如文本、圖片、視頻等，有調(diào)查顯示大數(shù)據(jù)處理已經(jīng)成為影響電子商務(wù)進(jìn)一步發(fā)展的最主要因素。
一、大數(shù)據(jù)處理模式
在電子商務(wù)領(lǐng)域內(nèi)，信息的大批量處理如果是以PB、EB、ZB為計(jì)量單位，則這些信息就構(gòu)成了大數(shù)據(jù)。以往的計(jì)算機(jī)處理模式已經(jīng)很難對(duì)這些大數(shù)據(jù)進(jìn)行高效率的處理，勢(shì)必會(huì)影響電子商務(wù)的總體發(fā)展。因此對(duì)大數(shù)據(jù)時(shí)代的計(jì)算機(jī)處理模式進(jìn)行革新是獲得電商行業(yè)整體突破的基本保證。傳統(tǒng)的數(shù)據(jù)處理模式是數(shù)據(jù)庫(kù)集群模式，大數(shù)據(jù)處理模式的基本要求是建構(gòu)云計(jì)算Map Reduce處理體系，使信息的分解處理和結(jié)果合并成為可能。
(一)數(shù)據(jù)庫(kù)集群模式
集群模式的基本運(yùn)行原理是將同一種應(yīng)用程序通過(guò)不同的工作方法相互協(xié)調(diào)共同完成，在面對(duì)客戶(hù)端的數(shù)據(jù)請(qǐng)求時(shí)，為其提供單一映像，并將這些映像通過(guò)一定的連接技術(shù)和方法與硬件系統(tǒng)進(jìn)行連接，整體上建構(gòu)一個(gè)松散耦合的集合。簡(jiǎn)單來(lái)說(shuō)，數(shù)據(jù)庫(kù)集群模式實(shí)現(xiàn)了數(shù)據(jù)庫(kù)技術(shù)和集群技術(shù)的結(jié)合。數(shù)據(jù)庫(kù)集群模式的運(yùn)行較為平穩(wěn)，具有多方面的技術(shù)優(yōu)勢(shì)，例如強(qiáng)大的靠擴(kuò)展性、整體的可靠性等等。
但是在面對(duì)大數(shù)據(jù)處理時(shí)，數(shù)據(jù)庫(kù)集群也表現(xiàn)出了一定的缺陷。這些缺陷主要包含以下方面：第一是可擴(kuò)展性補(bǔ)不強(qiáng)。如果系統(tǒng)功能節(jié)點(diǎn)的硬件基礎(chǔ)設(shè)施選擇的是Pc服務(wù)器，那么將會(huì)出現(xiàn)系統(tǒng)線(xiàn)纜繁雜、硬件高度復(fù)雜化和架設(shè)安裝難度大等問(wèn)題，對(duì)其擴(kuò)展性造成了一定的限制；第二是數(shù)據(jù)通信受限。目前運(yùn)行高速互聯(lián)網(wǎng)的必備條件是將PCI插槽與主機(jī)進(jìn)行連接。但是PCI的數(shù)據(jù)傳送能力有限，不能滿(mǎn)足節(jié)點(diǎn)間的數(shù)據(jù)通信要求；第三是提升空間小。這種空間主要是指數(shù)據(jù)庫(kù)數(shù)據(jù)集的可擴(kuò)展空間，在進(jìn)行數(shù)據(jù)處理時(shí)如何解決系統(tǒng)的安全性、運(yùn)算速度和可擴(kuò)展性是數(shù)據(jù)庫(kù)集群模式要面對(duì)的重要問(wèn)題。此外，數(shù)據(jù)庫(kù)集群模式還存在兼容性、可靠性、容錯(cuò)性、對(duì)異質(zhì)條件支持能力等方面的局限性。
(二)Map Reduce框架
云計(jì)算構(gòu)架主要是由低端服務(wù)器進(jìn)行大規(guī)模集群構(gòu)成的數(shù)據(jù)處理技術(shù)，在數(shù)據(jù)存儲(chǔ)容量和數(shù)據(jù)處理能力上具有絕對(duì)的優(yōu)勢(shì)。由于云計(jì)算平臺(tái)在運(yùn)行中的可靠性和可擴(kuò)展性等功能，目前眾多的大型企業(yè)或單位都將其作為web搜索和大數(shù)據(jù)分析的主要平臺(tái)，如中國(guó)移動(dòng)、淘寶、網(wǎng)易、百度等等。Map Reduce框架主要包含三個(gè)方面的內(nèi)容，即并行編程模型Map Reduce、分布式文件系統(tǒng)(HDFs)、并行執(zhí)行引擎。
Map Reduce的設(shè)計(jì)是由google完成的，主要是進(jìn)行大數(shù)據(jù)集的計(jì)算處理工作，代表了分析技術(shù)的整體發(fā)展?fàn)顟B(tài)。Map Reduce在進(jìn)行數(shù)據(jù)處理時(shí)，先將對(duì)象進(jìn)行抽象化處理，使其以映射和化簡(jiǎn)操作對(duì)的形式呈現(xiàn)出來(lái)，其中映射部分進(jìn)行數(shù)據(jù)的過(guò)濾，化簡(jiǎn)部分進(jìn)行數(shù)據(jù)的聚集工作，在工作中均以良好的界面進(jìn)行管理工作。對(duì)Map Reduce計(jì)算過(guò)程進(jìn)行分解，可以將其工作原理理解為將大數(shù)據(jù)集進(jìn)行解構(gòu)，解構(gòu)之后的結(jié)果是形成了數(shù)量眾多的小數(shù)據(jù)集，通過(guò)集群節(jié)點(diǎn)對(duì)這些小數(shù)據(jù)集進(jìn)行分別處理，由此得出中間結(jié)果，將這些結(jié)果通過(guò)節(jié)點(diǎn)進(jìn)行合并，就可以得出對(duì)整個(gè)大數(shù)據(jù)集的處理結(jié)果。
二、大數(shù)據(jù)時(shí)代電子商務(wù)IT技術(shù)設(shè)施的革新
IT基礎(chǔ)設(shè)施是保證電子商務(wù)系統(tǒng)運(yùn)行的前提，對(duì)其進(jìn)行技術(shù)革新能夠使其快速適應(yīng)電子商務(wù)大數(shù)據(jù)時(shí)代。在后互聯(lián)網(wǎng)技術(shù)時(shí)代，電子商務(wù)企業(yè)廣泛采用的IT基礎(chǔ)設(shè)施一般是PC服務(wù)器。隨著數(shù)據(jù)信息處理規(guī)模的擴(kuò)大和處理能力的要求不斷增強(qiáng)，電子商務(wù)企業(yè)對(duì)于IT基礎(chǔ)設(shè)施的革新正朝著小型化和集群化方向發(fā)展，與此同時(shí)，電商企業(yè)還需要不斷地投入大量的人力和技術(shù)實(shí)現(xiàn)IT基礎(chǔ)設(shè)施的維護(hù)、升級(jí)和更新。
(一)數(shù)據(jù)倉(cāng)庫(kù)的發(fā)展
從近期對(duì)電子商務(wù)信息處理數(shù)據(jù)的研究可以發(fā)現(xiàn)，在系統(tǒng)運(yùn)行中出現(xiàn)的大數(shù)據(jù)仍在以驚人的速度發(fā)展和增長(zhǎng)，其特點(diǎn)也表現(xiàn)為明顯的分布式發(fā)展和異構(gòu)性趨勢(shì)。傳統(tǒng)的數(shù)據(jù)庫(kù)如具備一般數(shù)據(jù)處理功能和信息分析技術(shù)的數(shù)據(jù)庫(kù)以及BI技術(shù)已經(jīng)很大程度上不能滿(mǎn)足PB級(jí)的數(shù)據(jù)量處理要求。這種大規(guī)模數(shù)據(jù)的發(fā)展促使電子商務(wù)數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)出現(xiàn)了非常明顯的變革，也即是數(shù)據(jù)量數(shù)量級(jí)不斷上調(diào)，目前已經(jīng)實(shí)現(xiàn)了由TB向PB的邁進(jìn)，并且仍呈現(xiàn)出爆炸性的增長(zhǎng)態(tài)勢(shì)。
根據(jù)對(duì)現(xiàn)今電商數(shù)據(jù)量發(fā)展?fàn)顩r及趨勢(shì)的研究，可以發(fā)現(xiàn)電子商務(wù)數(shù)據(jù)倉(cāng)庫(kù)將會(huì)呈現(xiàn)以下特點(diǎn)：第一，未來(lái)兩年電商數(shù)據(jù)倉(cāng)庫(kù)的最大數(shù)據(jù)量將會(huì)達(dá)到甚至超過(guò)1OOPB，并且其增長(zhǎng)速度也將呈現(xiàn)出前所未有的變化，遠(yuǎn)遠(yuǎn)超過(guò)摩爾定律；第二，對(duì)數(shù)據(jù)的分析方式實(shí)現(xiàn)質(zhì)的變化，將從常規(guī)化分析向深度化分析轉(zhuǎn)變；第三，中低端硬件組成的大規(guī)模集群硬件平臺(tái)將會(huì)代替高端服務(wù)器構(gòu)成的基礎(chǔ)設(shè)施硬件支持平臺(tái)，基礎(chǔ)設(shè)施進(jìn)一步向集群化發(fā)展；由于硬件系統(tǒng)的革新將會(huì)對(duì)并行數(shù)據(jù)庫(kù)產(chǎn)生了重要影響，使其規(guī)模不斷擴(kuò)大，由此帶來(lái)的成本也將逐漸增長(zhǎng)�？傮w來(lái)講，目前電子商務(wù)將會(huì)出現(xiàn)大規(guī)模革新的直接因素是數(shù)據(jù)量的大規(guī)模增長(zhǎng)和深度分析的現(xiàn)實(shí)要求。
(二)云計(jì)算構(gòu)架
云計(jì)算構(gòu)架是一種針對(duì)分布式網(wǎng)絡(luò)計(jì)算而設(shè)計(jì)的新型數(shù)據(jù)處理模式，在應(yīng)用中已經(jīng)表現(xiàn)出了良好的適應(yīng)性。在網(wǎng)絡(luò)環(huán)境中進(jìn)行計(jì)算、存儲(chǔ)、軟件等在線(xiàn)服務(wù)時(shí)較傳統(tǒng)構(gòu)架有顯著的性能提升。在目前應(yīng)用于電子商務(wù)領(lǐng)域內(nèi)的云計(jì)算構(gòu)架來(lái)講，其具備了以下特征：按需自助服務(wù)(on Demand self-service)、可度量服務(wù)(measured service)、池化資源(resource pooling)、泛化網(wǎng)絡(luò)訪(fǎng)問(wèn)((broad network access)以及快速?gòu)椥?rapid elasticity)。
三、大數(shù)據(jù)處理對(duì)電子商務(wù)的影響
云計(jì)算的發(fā)展歷史并不長(zhǎng)，首次引入云計(jì)算技術(shù)的是淘寶網(wǎng)，其所有交易都是基于自建系統(tǒng)完成的，而阿里云也成為我國(guó)首家開(kāi)展云計(jì)算供應(yīng)的公司。云計(jì)算對(duì)于大數(shù)據(jù)的超強(qiáng)處理能力使其對(duì)電子商務(wù)的發(fā)展起到了推波助瀾的作用，主要影響表現(xiàn)在以下方面。
（一)信息檢索能力
電子商務(wù)平臺(tái)雖然很大程度上改變了消費(fèi)者的購(gòu)物方式，但是就營(yíng)銷(xiāo)方式來(lái)說(shuō)，商品數(shù)量和種類(lèi)依然是影響消費(fèi)者選擇商家的主要因素。在電子商務(wù)領(lǐng)域內(nèi)，商品數(shù)量和種類(lèi)呈現(xiàn)出結(jié)構(gòu)的繁雜化發(fā)展甚至是非結(jié)構(gòu)化發(fā)展趨勢(shì)。這些都為IT基礎(chǔ)設(shè)施以及信息處理技術(shù)提出了挑戰(zhàn)，大數(shù)據(jù)處理技術(shù)由于其具備的靈活性和功能強(qiáng)大的檢索服務(wù)使其能夠引領(lǐng)電子商務(wù)信息處理技術(shù)的新方向。
云計(jì)算的檢索服務(wù)可以根據(jù)客戶(hù)的實(shí)際需求和交易習(xí)慣對(duì)大量的信息進(jìn)行篩選和顯示，其智能性和高效性也是傳統(tǒng)IT基礎(chǔ)設(shè)施多不能比擬的。此外，云平臺(tái)還具有信息推薦功能，根據(jù)網(wǎng)上交易整體情況篩選熱點(diǎn)商品予以展示，提高了交易的針對(duì)性和檢索效率。云計(jì)算性能的優(yōu)勢(shì)還體現(xiàn)在對(duì)人類(lèi)部分思維進(jìn)行描述的功能上，解決了長(zhǎng)期以來(lái)計(jì)算機(jī)信息處理不能夠準(zhǔn)確把握人類(lèi)語(yǔ)言和知識(shí)應(yīng)用的難題，使數(shù)據(jù)的處理實(shí)現(xiàn)了功能的深度發(fā)掘。這種技術(shù)優(yōu)勢(shì)表現(xiàn)在實(shí)際交易中就是電商平臺(tái)能夠?qū)τ脩?hù)輸入的語(yǔ)言進(jìn)行迅速的反映，并能準(zhǔn)確地提供用戶(hù)所需耍的商品信息。這種處理過(guò)程極大地提高了信息服務(wù)的效率和質(zhì)量，使用戶(hù)滿(mǎn)意度得到了很大的提升。
(二)彈性處理能力
電子商務(wù)信息處理系統(tǒng)的工作性質(zhì)使其必須具有強(qiáng)大的彈性處理能力，并能夠在極短的時(shí)間內(nèi)做出反映以應(yīng)對(duì)在系統(tǒng)運(yùn)行中出現(xiàn)的各種問(wèn)題。這些問(wèn)題的出現(xiàn)并不是偶然的，而是隨著用戶(hù)的并發(fā)訪(fǎng)問(wèn)以及商家集體營(yíng)銷(xiāo)活動(dòng)造成的大量訂單信息所導(dǎo)致的，這些情況在當(dāng)前的電商系統(tǒng)運(yùn)行中是比較常見(jiàn)的，這就需要系統(tǒng)在面臨突然增長(zhǎng)的業(yè)務(wù)量時(shí)具有強(qiáng)大的擴(kuò)容能力和數(shù)據(jù)的存儲(chǔ)能力。
云計(jì)算技術(shù)的出現(xiàn)在理論上實(shí)現(xiàn)了信息的無(wú)上限存儲(chǔ)能力以及超大規(guī)模信息處理能力，使其能夠輕松地應(yīng)對(duì)TB數(shù)量級(jí)的信息乃至PB數(shù)量級(jí)的信息處理。而這一功能的實(shí)施并不需要企業(yè)對(duì)硬件系統(tǒng)進(jìn)行更換，而且能夠以比較低的成本享用云計(jì)算存儲(chǔ)處理信息服務(wù)，在此基礎(chǔ)上對(duì)應(yīng)用系統(tǒng)機(jī)型全方位的布局并保證了彈性處理能力的實(shí)現(xiàn)，使資源達(dá)到了最優(yōu)化配置。
(三)信息處理安全性能
網(wǎng)絡(luò)系統(tǒng)面臨的最大難題是信息安全問(wèn)題，保證交易安全和用戶(hù)信息安全更是電商企業(yè)應(yīng)時(shí)刻關(guān)注的話(huà)題。信息時(shí)代的一大特征是將信息轉(zhuǎn)化為可利用的資源，甚至是直接創(chuàng)造經(jīng)濟(jì)價(jià)值的信息資本。電子商務(wù)領(lǐng)域內(nèi)，大數(shù)據(jù)就是企業(yè)生存發(fā)展的重要資本，對(duì)于大數(shù)據(jù)的掌控能力將成為衡量企業(yè)核心競(jìng)爭(zhēng)力的主要標(biāo)志。但是大數(shù)據(jù)的出現(xiàn)同樣給信息資源的安全帶來(lái)了極大的挑戰(zhàn)，由于其結(jié)構(gòu)復(fù)雜，數(shù)量巨多，并且大多是具有敏感性的信息，很容易成為網(wǎng)絡(luò)攻擊的目標(biāo)。
大數(shù)據(jù)處理技術(shù)在應(yīng)對(duì)信息安全是進(jìn)行了性能的全面評(píng)估，使其能夠及時(shí)、精確地定位各類(lèi)網(wǎng)絡(luò)攻擊或非正常現(xiàn)象，并將這些異常數(shù)據(jù)收集整理通過(guò)分析實(shí)施預(yù)防措施。云計(jì)算技術(shù)的安全性還體現(xiàn)在將安全可靠的信息轉(zhuǎn)化為云服務(wù)，并將這些信息托管在云端，為用戶(hù)的信息提供了專(zhuān)業(yè)化的信息防護(hù)措施和保密方案。
四、大數(shù)據(jù)處理的發(fā)展趨勢(shì)
信息技術(shù)的發(fā)展歷史并不長(zhǎng)遠(yuǎn)，但是在每個(gè)發(fā)展階段都會(huì)出現(xiàn)具有標(biāo)志性的技術(shù)類(lèi)型和產(chǎn)品。在目前，信息技術(shù)的熱點(diǎn)以及將會(huì)對(duì)信息產(chǎn)業(yè)產(chǎn)生重大影響的無(wú)疑是云計(jì)算技術(shù)和大數(shù)據(jù)處理f司題。在電子商務(wù)環(huán)境中大數(shù)據(jù)處理將會(huì)發(fā)展出更多強(qiáng)大和多元的功能，具體發(fā)展趨勢(shì)有以下幾點(diǎn)。
(一)大數(shù)據(jù)處理服務(wù)和產(chǎn)品的多樣化
目前電子商務(wù)平臺(tái)的服務(wù)和產(chǎn)品正在向著多元化的方向發(fā)展，除了電商企業(yè)之外，政府機(jī)構(gòu)、大型集團(tuán)企業(yè)、行政事業(yè)單位等都加入或正在加入構(gòu)建云環(huán)境下的數(shù)據(jù)處理服務(wù)平臺(tái)，并且可以實(shí)現(xiàn)對(duì)沒(méi)有充足IT能力的小型電子商務(wù)企業(yè)進(jìn)行服務(wù)和產(chǎn)品的輸出。
(二)新型的電子商務(wù)運(yùn)營(yíng)模式
云計(jì)算的出現(xiàn)不僅對(duì)IT技術(shù)設(shè)施進(jìn)行了大規(guī)模和深度的革新，同時(shí)其帶來(lái)的眾多產(chǎn)品如長(zhǎng)尾效應(yīng)、經(jīng)濟(jì)效應(yīng)、眾包、個(gè)性化服務(wù)等對(duì)于經(jīng)濟(jì)學(xué)概念的再認(rèn)知也產(chǎn)生了重大的影響。這些變革有助于盈利性企業(yè)的經(jīng)營(yíng)模式做出重大的調(diào)整，進(jìn)而加快了向服務(wù)經(jīng)濟(jì)社會(huì)發(fā)展的步伐。隨著信息技術(shù)的進(jìn)一步發(fā)展和現(xiàn)有技術(shù)的逐步完善，傳統(tǒng)經(jīng)濟(jì)模式必將會(huì)受到嚴(yán)重的沖擊，商業(yè)模式也會(huì)隨之產(chǎn)生整體性的變動(dòng)甚至是根本性的改變，并且在變化中不斷進(jìn)行新技術(shù)、新方法和新思路的探索。
(三)IT設(shè)施將成為企業(yè)核心競(jìng)爭(zhēng)力的重要組成部分
企業(yè)的核心競(jìng)爭(zhēng)力包含多方面的內(nèi)容，但可以確定的是都是對(duì)企業(yè)發(fā)展具有重大影響的因素。隨著現(xiàn)代信息化時(shí)代的發(fā)展和信息技術(shù)在各個(gè)領(lǐng)域內(nèi)的廣泛使用，企業(yè)成產(chǎn)、管理、經(jīng)營(yíng)等模塊的信息化將會(huì)對(duì)企業(yè)能否適應(yīng)社會(huì)的發(fā)展以及在日益激烈的市場(chǎng)中保持其競(jìng)爭(zhēng)力產(chǎn)生舉足輕重的作用。通過(guò)對(duì)IT基礎(chǔ)設(shè)施進(jìn)行引進(jìn)和革新，能在最大限度內(nèi)實(shí)現(xiàn)資源的最佳配置，提高生產(chǎn)質(zhì)量和效率，降低企業(yè)運(yùn)營(yíng)成本，提升企業(yè)的整體管理水平。特別是對(duì)于信息技術(shù)依賴(lài)程度高的電子商務(wù)企業(yè)，云計(jì)算構(gòu)架和大數(shù)據(jù)處理技術(shù)的可擴(kuò)展性相當(dāng)可觀，為海量信息的存儲(chǔ)、整合和管理提供了安全可靠的環(huán)境，通過(guò)IT基礎(chǔ)設(shè)施的技術(shù)優(yōu)勢(shì)，為突破電子商務(wù)行業(yè)的發(fā)展上限提供了可能。
核心關(guān)注：拓步ERP系統(tǒng)平臺(tái)是覆蓋了眾多的業(yè)務(wù)領(lǐng)域、行業(yè)應(yīng)用，蘊(yùn)涵了豐富的ERP管理思想，集成了ERP軟件業(yè)務(wù)管理理念，功能涉及供應(yīng)鏈、成本、制造、CRM、HR等眾多業(yè)務(wù)領(lǐng)域的管理，全面涵蓋了企業(yè)關(guān)注ERP管理系統(tǒng)的核心領(lǐng)域，是眾多中小企業(yè)信息化建設(shè)首選的ERP管理軟件信賴(lài)品牌。
轉(zhuǎn)載請(qǐng)注明出處：拓步ERP資訊網(wǎng)http://www.ezxoed.cn/
本文標(biāo)題：淺談大數(shù)據(jù)處理對(duì)電子商務(wù)的影響
相關(guān)文章
