大數(shù)據(jù)時代企業(yè)所面臨的三大挑戰(zhàn)

2014-04-11 10:53:03 天極網　點擊量：評論 (0)

大數(shù)據(jù)應用在全球各國發(fā)酵之際，伴隨而來的問題，就是各國普遍缺乏數(shù)據(jù)科學家，在國內，大數(shù)據(jù)的應用雖然才剛剛萌芽，但是要面臨的幾項重大挑戰(zhàn)。

　　挑戰(zhàn) 1
數(shù)據(jù)分析人才不足
　　因應大數(shù)據(jù)處理的需求，不論企業(yè)決定采用哪一種解決方案，最終需要有數(shù)據(jù)科學家來運用這些大數(shù)據(jù)，才能活化大數(shù)據(jù)的價值，重新建構數(shù)據(jù)之間的關系，并賦予新的意義，進而轉換成企業(yè)的競爭武器。
　　在大數(shù)據(jù)處理環(huán)節(jié)中，數(shù)據(jù)科學家是能否點燃大數(shù)據(jù)價值的關鍵。然而，數(shù)據(jù)科學家的養(yǎng)成并不容易，因為數(shù)據(jù)科學家必須同時具備3種條件，包括深入了解企業(yè)內的業(yè)務與組織、具備數(shù)據(jù)探勘等統(tǒng)計應用知識、熟悉數(shù)據(jù)分析工具操作。
　　一般而言，擁有一項專長的人很多，但是，同時擁有3種專長的人，就非常稀少。然而，作為數(shù)據(jù)科學家就必須有整合運用的能力。否則如果只是熟悉數(shù)據(jù)分析工具操作，但卻不懂企業(yè)內的業(yè)務運作細節(jié)，就無法從既有數(shù)據(jù)中挖掘出新的數(shù)據(jù)價值。而若只懂業(yè)務卻不熟悉數(shù)據(jù)分析工具，也很難重新架構數(shù)據(jù)的價值。同樣的道理，如果缺乏數(shù)據(jù)探勘的技巧，最多只能做到OLAP(Online Analytical Processing)的展現(xiàn)。
　　目前國內的數(shù)據(jù)分析師，較擅長的是處理已經發(fā)生的問題，找出問題源頭，并且盡速排除問題，但是，相對缺乏發(fā)掘未知問題的能力。根據(jù)市場調查機構 Gartner的數(shù)據(jù)，有高達72%的企業(yè)認為，大數(shù)據(jù)的應用價值，在于預測未來。然而，這樣的應用需求與國內數(shù)據(jù)科學家的人才才不相匹配，預計將成為國內發(fā)展大數(shù)據(jù)應用的最大挑戰(zhàn)。
　　數(shù)據(jù)科學家必須同時具備3種條件，包括深入了解企業(yè)內的業(yè)務與組織、具備數(shù)據(jù)探勘等統(tǒng)計應用知識、熟悉數(shù)據(jù)分析工具操作。數(shù)據(jù)科學家的工作職缺，從2011年開始急速攀升，成為前10大熱門職缺。這項統(tǒng)計是匯集1千多個人力招聘公司的數(shù)百萬個職缺結果。

　　挑戰(zhàn) 2
當?shù)卮髷?shù)據(jù)顧問服務不足
　　在大數(shù)據(jù)的應用風潮下，新興的技術與人才也備受矚目，其中又以Hadoop架構的技術人才最為缺乏，目前不論企業(yè)或信息廠商都相當缺乏非結構數(shù)據(jù)處理的技術人才，因此，即使是概念驗證階段，大多需要依賴國外顧問飛來國內，所花費的時間與成本，都讓大數(shù)據(jù)處理的效益大打折扣。
　　國內之所以會面臨Hadoop人才不足的問題，主要是因為Hadoop的發(fā)展源自美國，所以Hadoop相關的技術資源，也都聚集在北美。目前Hadoop的應用，雖然逐漸延伸到亞洲國家，然而相關的技術人才與顧問服務都還在萌芽。
　　為了解決Hadoop當?shù)仡檰柗詹蛔愕膯栴}，企業(yè)也可以考慮培養(yǎng)自己的Hadoop團隊。然而，由于Hadoop的應用在國內才剛剛開始，因此，企業(yè)對于是否要培養(yǎng)自己的Hadoop團隊，尚言之過早。一方面是因為企業(yè)的大數(shù)據(jù)處理，還沒有導入Hadoop的迫切性，另一方面則是對 Hadoop的長期發(fā)展還在觀望當中。
　　奇美電子信息管理處副總處長李宴昌不諱言地指出，信息產業(yè)每隔幾年就會出現(xiàn)一個新技術，但未來能否普及卻不一定，企業(yè)不可能承擔這種風險，在這個階段就決定培養(yǎng)Hadoop技術人才，除非可以確定這種人才的長期需求，否則寧愿先觀望再布局。

　　挑戰(zhàn) 3
對數(shù)據(jù)價值的敏感度不足
　　大數(shù)據(jù)的價值，除了解決現(xiàn)在無法解決的問題，還要能發(fā)掘原本不知道的問題。業(yè)內人士認為，數(shù)據(jù)分析的前提是，數(shù)據(jù)保留的完整性與正確性。然而，在國內的企業(yè)文化中，長期以來都沒有依賴數(shù)據(jù)來做決策判斷的習慣，對于數(shù)據(jù)的價值也理解不足，甚至是忽略數(shù)據(jù)的存在，因此，有些企業(yè)根本沒有保留數(shù)據(jù)與應用數(shù)據(jù)的長期規(guī)劃。
　　舉例來說，在國內部署非常普遍的ERP系統(tǒng)，是所有應用系統(tǒng)中，與企業(yè)營運最息息相關的系統(tǒng)，理論上，ERP系統(tǒng)中的數(shù)據(jù)品質，也就是數(shù)據(jù)的正確性以及一致性等，應該都是企業(yè)內各應用系統(tǒng)中最好的。但實際的情況并非如此，ERP系統(tǒng)的帳務數(shù)據(jù)，并不能與企業(yè)的營運畫上等號。
　　一般而言，企業(yè)在導入大數(shù)據(jù)應用時，如果既有應用系統(tǒng)的數(shù)據(jù)品質越好，技術面導入的成功機率就越高。而若沒有好的數(shù)據(jù)品質，卻要做大數(shù)據(jù)分析，就要有面對辛苦的準備，因為大數(shù)據(jù)分析絕對還是必要的。
　　大數(shù)據(jù)分析的價值，在于活化數(shù)據(jù)再利用。信息科技的發(fā)展，本來就是為了處理信息，而不是為了提升硬體效能，如果導入大數(shù)據(jù)的決策單位，是由信息部門主導，很有可能就會專注在系統(tǒng)效能提升層面。如果由執(zhí)行長等級的決策者領軍，相對較易把大數(shù)據(jù)的應用與業(yè)務命脈整合。
　　根據(jù)市場調查機構Ventana所揭露的數(shù)據(jù)，目前導入大數(shù)據(jù)的決策者，高達66%是信息部門的中階主管，由信息高級主管等級來做決策的比例，僅有33%。