當前位置：行業資訊 >> 行業新聞 >>
存儲是大數據的根本之所在
2013-09
字號：
隨著物聯網、社交化、BYOD等技術的廣泛應用，數據呈現爆炸性增長。不僅對存儲的性能及容量提出苛刻考驗，還要具備快速的數據檢索與分析能力以即時獲取關鍵價值信息；同時，活躍數據歸檔需要更加簡便、成本效益的存儲方案。美國市場研究公司IDC認為“在可預見的未來，存儲是大數據和分析領域最大的基礎設施開支之一。
Hadoop的數據是非常重要的一點。一般來說有三種方法來應對處理和存儲，一種方法是實時的分析工具，同時還有一些數據的操作性的工作。也就是說得到了什么到底怎么做?同時還需要進行對數據的操作，這需要處理多種不同的數據得到一個結果，這就是Hadoop在早期的時候超越其他工具的地方。而且我們必須要處理數據，用這個數據來在培訓過程中引用到，或者引用來進行一些可視化，幫助來使用一些。
存儲和網絡也是Hadoop集群性能的重要保證。在Hadoop集群中，萬兆位以太網（10GbE）帶來的帶寬增長是導入和復制（在多臺服務器之間）大型數據集的關鍵，英特爾Ethernet10Gigabit融合網絡適配器提供了高吞吐量連接，同時英特爾SATA固態硬盤為原始存儲提供了高性能、高吞吐量存儲選擇。為提高效率，存儲往往需要支持其它高級能力，如壓縮、加密、自動數據分層、重復數據刪除、糾刪碼和自動精簡配置，現有的英特爾至強處理器都已經支持這些功能。
隨著大量IT廠商的加入，Hadoop的商用版本正呈增長趨勢，眾多廠商都推出了自己的Hadoop版本，并集合了其他Hadoop項目的基本堆棧，可與數據倉庫、數據庫和其他數據管理產品集成。
讓Hadoop成為下一代數據分析平臺的“基石”。英特爾Hadoop發行版免費版v2.2,為最終用戶和應用提供商提供了一個功能強大、方便易用的大數據入門平臺。而且免費版和企業版共用相同的核心代碼，免費版也包含所有核心增強功能，不過免費版在節點數和系統存儲容量上有所限制。
英特爾大數據Hadoop的版本特點有4個方面，一方面是穩定性和易用性上做了優化。第二方面對英特爾的平臺做了特殊的優化，這個軟件包在英特爾平臺上從性能上和效率上是有優勢的。第三方面在算法和結構上做了調整，也就是對即時性的優化，使得它能夠做到即時的數據處理。第四方面是和中國的用戶合作，對行業應用做了特殊的調整和優化。
最重要的還是是安全的優化，要運行各種不同的運行，在某一個APP的環境Hadoop是一個獨立的集群，也許它管理起來并不是那么容易，雖然效率并不是很高，但它是獨立運行的，把它放在一起可以看到是單一數據的分享。我們看到了很多的數據，把它放到了云的計算中，比如說基礎設施可能是同一個基礎架構對資源進行分享。但在分享存儲這方面可以看到有一些大數據都可以有一些優勢，但問題并不是完全需要這樣的。資源的分享、存儲的分享確實是可以的，你可以用SANorNAS進行分享，你可以對集群進行評論的工作，還可以幫助你不斷地改善虛擬的架構。
TOP
主辦單位：上海安全防范報警協會
shanghai security defense & alarm association
地址：上海市普陀區云嶺東路235號3號樓404室 電話：021-54732822 傳真：021-54732822
協會標準咨詢郵箱：sdaasc2015@126.com 協會工程咨詢郵箱：sdaapc2015@126.com 協會申訴咨詢郵箱：shanfang2701@126.com
ICP備案號: 滬ICP備14004542號-2
技術支持 : 愛建網
建議使用最新版瀏覽器,以獲得最佳瀏覽效果。
shanghai security defense & alarm association
地址：上海市普陀區云嶺東路235號3號樓404室 電話：021-54732822 傳真：021-54732822
協會標準咨詢郵箱：sdaasc2015@126.com 協會工程咨詢郵箱：sdaapc2015@126.com 協會申訴咨詢郵箱：shanfang2701@126.com
ICP備案號: 滬ICP備14004542號-2
滬公網安備 31011202001934號
技術支持 : 愛建網
建議使用最新版瀏覽器,以獲得最佳瀏覽效果。