shanghai security defense & alarm association 愛建網">
盡管光纖信道一直統領著儲存網絡領域,然而,云存儲已經成為業內熱門話題。下面,讓我為大家介紹一下什么是云存儲,以及其為啥能成為業內共同關注焦點?在2011年4月7日,星期四,也是SNW大會的最后一天,Facebook宣布將推出開放式計算工程。
結構數據與非結構數據
根據結構數據(Structureddata)與非結構數據(Unstructureddata)的對比比例估計,在一個企業中,非結構數據的比率大約為80%。非結構數據是一種由電子郵件,企業內部文件,企業新聞,博客文章以及公司網頁組成的沒有形成固定結構的數據,而結構數據則是在相關數據庫里獲取的數據源。如果你形成了一種新的數據格式,并且可以從其數據庫里獲取,那這就是結構數據,反之亦然。
為什么要討論結構數據和非結構數據呢?
當數據變為結構數據時,通過光纖信道獲取信號的水準才最有效。隨著結構數據量的不斷遞增,光纖信道也變得越來越流行。在過去的10年里,光纖信道成為各大企業編寫結構數據庫時,最好的網絡傳輸工具。那么,在未來發展中,光纖信道將何去何從?當然,結構數據也在逐漸走下坡路,但事實上,在經過一段萎靡期后,結構數據也會逐漸上揚。然而,諸如谷歌(Google)以及Facebook之類的搜索引擎和社交網絡公司一直在探索非結構數據。其結果就是,谷歌和Facebook公司不會采用光纖信道的方式來獲取數據,當然這要除了英特爾網絡應用之外,如:ERP。同時,谷歌和Facebook則需要為Sarbaines-Oxley提供相關報告。在谷歌和Facebook的網絡存儲器中,典型的使用兩種SATA驅動器,并且在其他單獨的服務器中備份了3份所搜集的數據,這樣一來,無需RAID(OFweek通信國際注:RAID是“RedundantArrayofIndependentDisk”的縮寫,中文意思是獨立冗余磁盤陣列。),就能解決數據冗余的問題。RAID是一種應用在結構數據中,且成本非常高的一種存儲磁盤陣列。他們采用的是一種名為,ApacheHadoop的軟件架構,該軟件架構是谷歌通過其GFS(谷歌文件系統,GoogleFileSystem)系統所構思的,也是其開源HDFS(Hadoop分布文件系統,HadoopDistributedFileSystem)系統發展的產物。HDFS是一種用于大型文件處理,支持多個64Mbs文件格式處理的文件系統。很顯然,當用于處理文本文檔時,HDFS的確有點大材小用,但當處理音頻文件、圖片、以及視頻文件時,HDFS就能獨擋一面,成為焦點。HDFS是典型與HBase以及在Google的BigTable和(或)稱為Hive的數據庫架構之后的其他開源模式項目相配套使用的文件處理系統。這到底是啥意思呢?隨著Web2.0數據的飛速增長,Web2.0的網絡用戶所提供的網絡數據就成為了Web1.0網站信息發布者的相關數據源,我們希望增長最快的是非結構數據。谷歌和Facebook所采用的都是帶存儲功能的服務器,網絡數據首先被存儲在其本地硬盤上,然后再通過網絡附件形式,存儲到其標準的網絡服務器上。我們知道,搜索引擎和社交網絡這些網站所使用的網絡存儲器都來自國產。然而,問題是,在多數企業轉型向云計算和云存儲模式發展的大前提下,傳統數據中心是否也會朝這個方向發展,或者將被迫朝這個方向發展?
云計算和云存儲
云計算和傳統的網絡計算的不同之處在于,傳統網絡計算是用戶通過租賃IT設備商的網絡設備,以及向設備商支付運營成本(如設備制冷、設備能耗等)的方式,而云計算則是用戶自己根據其使用需求設計、購買、安裝、運維IT設備以及軟件,當然包括運營成本(如設備制冷、設備能耗等)。進而,用戶還控制其設備的使用周期、設備升級以及設備的停運等運營項目。云計算和傳統網絡計算的最大不同點在于,在傳統網絡計算中,用戶必須向IT設備商提供其最大網絡數據源以及最高的網絡流量,而最高的網絡流量是很難估算的,因為公司每天都在向前發展,不斷升級與變化。鑒于此,多家公司合租一大型網絡服務器是最好的解決方案,這樣既減輕了租用公司的經濟壓力,也提高了服務器的使用率,也讓IT設備租賃公司賺取更多的利潤。云存儲也采用了同樣的多家公司合租服務器的商業運營模式。當谷歌對外提供7Gbs的超大容量,免費郵箱時,這個7Gbs聽起來的確是超大容量,但絕大多數個人電子郵箱用戶的使用率均低于1GB。同時,其他的云存儲商業運營模式將為某些企業專門量身定制合理的網絡存儲器(如:采用光纖信道存儲的1000GBs超大容量郵箱),當然在技術層面來講,這也對谷歌要求非常嚴格,因為大企業耗費巨資使用Gmail郵件業務,谷歌必須對其網絡數據安全負責。同時,這也是一種大型企業獨享的網絡業務。
云架構與商業模式:誰控制數據?
用戶是否會批量向云計算遷移的關鍵因素在于數據存儲在哪里,誰控制所存儲的數據,存儲數據的安全性如何?通過服務器合租的運營模式,云架構已經得以成功優化。在虛擬主機里的多數網絡應用允許用戶共享同一臺服務器,操作系統和應用軟件,構成一完整的共享存儲器資源體系。如果其中一家主要公司的運營和數據安全失控時,那么所有共享的公司也將受到威脅。許多用戶,特別是早期的用戶,更傾向于選用私有云,因為私有云的運營模式是其服務器等硬件設施和軟件設施均安置在自己IT機房內,但采用私有云的成本相對較高。在一家公司采用云架構的方式實現服務器合租,這也需要服務器租用公司自己控制其網絡數據。如果公有云設備商或公司諸如Amazon、Rackspace、微軟以及新加入云計算大家庭的HP公司提供的云計算服務在價格和用戶網絡數據安全這兩方面的競爭逐日變得激烈的話,將會有更多的企業選擇使用云計算,向云計算遷移。這將對用戶在選用云計算、云存儲、網絡傳輸、數據庫等的網絡供應商時提供更多的選擇,同時也會減少用戶對名牌云計算企業和存儲設備供應商的需求量,但也會讓用戶在琳瑯滿目的云計算領域失去方向。事實上,在2011年4月7日,Facebook推出了一款公開計算工程,其聲稱為開源網絡架構的服務器是目前業內數據中心中最高等級的網絡服務器。可以說,在該網絡架構中,沒有名牌硬件設備,存儲設備或者網絡。在公有云和存儲引領IT網絡領域之前,云計算的市場依舊很小。
為啥會有影響?光纖信道逐日萎靡,以太網需要更高帶寬
網絡存儲數據將不斷發展。我們希望在隨著越來越多的數據上傳到網絡,以及通過微軟的SharePoint工具上傳到企業內部網的數據,非架構數據能增長更快些。光纖信道的成本較高并且其只能用于結構數據。知道現在為止,谷歌也沒有采用10GbE網絡連接器服務器和存儲器。
在谷歌的運營模式中,兩臺SATA驅動器也未能掙脫1GbE的束縛。這個變革就類似于應用廣泛的FLASH和應用在服務器里的超高速緩存一樣,或許每個服務器處理4~12GBs指令。FLASH緩存區將為交換機設備從當前的1GbE升級到采用40Gb或者100Gb交換機提供更高上行速率的10GbE網絡時提供更快、延時更低的網絡連接。公有云設備供應商將會面臨這種現象。隨著全球互聯網的逐漸升級,將會生成越來越多的結構數據,這將造就光纖信道繼續廣泛應用于結構數據領域。隨著業內逐漸過渡到40Gb和100Gb網絡通信時代,特別是對于在單模光纖上能傳輸1公里的光收發模塊,以及FCoE(OFweek通信國際注:FCoE:FibreChanneloverEthernet,以太網光纖通道)和iSCSI(OFweek通信國際注:iSCSI:Internet小型計算機系統接口InternetSmallComputerSystemInterface)變得更加成熟,許多當前應用于結構數據中的新型應用將逐漸過渡到以太網連接。
進而,據我們分析,SFP+光收發模塊以及成為10GbE的首選。上周,思科宣布其首臺架頂式服務器以及10GbELOM選擇接口都采用SFP+產品。隨著10GBASE-T逐漸發展,到2014年,SFP+將以標準的服務器連接產品的身份進入數據中心網絡連接領域。這周在斯坦福據悉的OIDA(OFweek通信國際注:OpticalelectronicsIndustryDevelopmentAssociation,光電子產業發展協會)會議上,來自Facebook的DonnLee表示,目前升級為10GbE的最廉價方式是采用SFP+DA線纜,并且應用于谷歌和Facebook以及云計算中的10Gb光收發器市場尚未發展成熟,因為這幾家公司是從模塊生產商處直接采購。隨著網絡存儲逐漸過渡到以太網領域,10GBASE-T的BER誤碼率使其在結構存儲應用中喪失威力。在未來發展中,我們將通過預測服務器、交換機以及存儲器直接的網絡鏈接市場的方式,繼續關注該領域市場。
滬公網安備 31011202001934號