国产色频,国产网站精品,成人在线综合网,精品一区二区三区毛片,亚洲无卡视频,黄色av观看,亚洲福利影视

存儲是大數(shù)據(jù)的基礎

2013-10-23 09:46:29 賽迪網  點擊量: 評論 (0)
隨著物聯(lián)網、社交化、BYOD等技術的廣泛應用,數(shù)據(jù)呈現(xiàn)爆炸性增長。不僅對存儲的性能及容量提出苛刻考驗,還要具備快速的數(shù)據(jù)檢索與分析能力以即時獲取關鍵價值信息;同時,活躍數(shù)據(jù)歸檔需要更加簡便、成
        隨著物聯(lián)、社交化、BYOD等技術的廣泛應用,數(shù)據(jù)呈現(xiàn)爆炸性增長。不僅對存儲的性能及容量提出苛刻考驗,還要具備快速的數(shù)據(jù)檢索與分析能力以即時獲取關鍵價值信息;同時,活躍數(shù)據(jù)歸檔需要更加簡便、成本效益的存儲方案。美國市場研究公司IDC認為“在可預見的未來,存儲是大數(shù)據(jù)和分析領域最大的基礎設施開支之一。

Hadoop的數(shù)據(jù)是非常重要的一點。一般來說有三種方法來應對處理和存儲,一種方法是實時的分析工具,同時還有一些數(shù)據(jù)的操作性的工作。也就是說得到了什么到底怎么做?同時還需要進行對數(shù)據(jù)的操作,這需要處理多種不同的數(shù)據(jù)得到一個結果,這就是Hadoop在早期的時候超越其他工具的地方。而且我們必須要處理數(shù)據(jù),用這個數(shù)據(jù)來在培訓過程中引用到,或者引用來進行一些可視化,幫助來使用一些。

存儲和網絡也是Hadoop集群性能的重要保證。在Hadoop集群中,萬兆位以太網(10GbE)帶來的帶寬增長是導入和復制(在多臺服務器之間)大型數(shù)據(jù)集的關鍵,英特爾Ethernet10Gigabit融合網絡適配器提供了高吞吐量連接,同時英特爾SATA固態(tài)硬盤為原始存儲提供了高性能、高吞吐量存儲選擇。為提高效率,存儲往往需要支持其它高級能力,如壓縮、加密、自動數(shù)據(jù)分層、重復數(shù)據(jù)刪除、糾刪碼和自動精簡配置,現(xiàn)有的英特爾至強處理器都已經支持這些功能。

隨著大量IT廠商的加入,Hadoop的商用版本正呈增長趨勢,眾多廠商都推出了自己的Hadoop版本,并集合了其他Hadoop項目的基本堆棧,可與數(shù)據(jù)倉庫、數(shù)據(jù)庫和其他數(shù)據(jù)管理產品集成。

讓Hadoop成為下一代數(shù)據(jù)分析平臺的“基石”。英特爾Hadoop發(fā)行版免費版v2.2,為最終用戶和應用提供商提供了一個功能強大、方便易用的大數(shù)據(jù)入門平臺。而且免費版和企業(yè)版共用相同的核心代碼,免費版也包含所有核心增強功能,不過免費版在節(jié)點數(shù)和系統(tǒng)存儲容量上有所限制。

英特爾大數(shù)據(jù)Hadoop的版本特點有4個方面,一方面是穩(wěn)定性和易用性上做了優(yōu)化。第二方面對英特爾的平臺做了特殊的優(yōu)化,這個軟件包在英特爾平臺上從性能上和效率上是有優(yōu)勢的。第三方面在算法和結構上做了調整,也就是對即時性的優(yōu)化,使得它能夠做到即時的數(shù)據(jù)處理。第四方面是和中國的用戶合作,對行業(yè)應用做了特殊的調整和優(yōu)化。

最重要的還是是安全的優(yōu)化,要運行各種不同的運行,在某一個APP的環(huán)境Hadoop是一個獨立的集群,也許它管理起來并不是那么容易,雖然效率并不是很高,但它是獨立運行的,把它放在一起可以看到是單一數(shù)據(jù)的分享。我們看到了很多的數(shù)據(jù),把它放到了云的計算中,比如說基礎設施可能是同一個基礎架構對資源進行分享。但在分享存儲這方面可以看到有一些大數(shù)據(jù)都可以有一些優(yōu)勢,但問題并不是完全需要這樣的。資源的分享、存儲的分享確實是可以的,你可以用SAN or NAS進行分享,你可以對集群進行評論的工作,還可以幫助你不斷地改善虛擬的架構。

大云網官方微信售電那點事兒

責任編輯:廖生玨

免責聲明:本文僅代表作者個人觀點,與本站無關。其原創(chuàng)性以及文中陳述文字和內容未經本站證實,對本文以及其中全部或者部分內容、文字的真實性、完整性、及時性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實相關內容。
我要收藏
個贊
?