《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > 分布式對象存儲——信息爆炸時代的“超級數據圖書館”
分布式對象存儲——信息爆炸時代的“超級數據圖書館”
CCTIME
CCTIME
摘要: 分布式,存儲,數據,存儲,,華為,更清晰的認識我們所生存的環境,提高人際溝通效率,人們收集和創造了大量的數據,有些是對物理世界的客觀描述,如原子和分子的組成,或是DNA螺旋結構;也包括煙波浩渺的宇宙中的星系和星云;亦或是人類對自身歷史的記錄;還有一些數據被用于人們相互溝通,
Abstract:
Key words :
</a>數據" title="數據">數據" title="數據">數據的產生及信息爆炸帶來的挑戰

    為了更清晰的認識我們所生存的環境,提高人際溝通效率,人們收集和創造了大量的數據,有些是對物理世界的客觀描述,如原子和分子的組成,或是DNA螺旋結構;也包括煙波浩渺的宇宙中的星系和星云;亦或是人類對自身歷史的記錄;還有一些數據被用于人們相互溝通,如Facebook上每天新增數十億條內容,或每天被發送的數千億封郵件。

    隨著人們對客觀世界的逐步認知,人際溝通的效率越來越高,人們的溝通與生活也越來越豐富,人類收集和創造的數據也越來越多,這些數據飽含信息與知識,是人類智慧與勤勞的結晶,是人類寶貴的信息資產。一部《史記》,共52萬6千500字,約1MB數據;一組用于基因研究的染色體照片數據量超過2TB;歐洲核子研究中心(CERN)每年有超過20PB數據通過全球最大的大型強子對撞機(LHC)被收集起來用于微觀粒子研究。根據IDC的分析,2011年全球數據產生量達到1.8ZB,到2020年這個數字將增長50倍(1ZB=1,000EB=1,000,000PB),如此大規模的數據給存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲系統帶來了巨大的挑戰,人類將如何應對咆哮而來的數據洪流?

    存儲方案的演進

    在人類發明和使用電子計算機以前,數據處理由人類大腦完成,大腦中還同時存儲了大量信息用于支撐數據處理,人類大腦存儲的信息依然相對有限,仍有大量數據被存儲在圖書館。當有需要的時候,人們便會到圖書館獲取更多的數據。以此我們可以總結出如下的一種數據存儲與數據處理模型:

    該模型包括三個部分,計算單元、內部存儲單元(低延遲,容量偏小)、外部存儲單元(延遲增加,容量超大)。如果按照對圖書的存儲(記憶)能力來估算,通常一個人大腦中能記憶的內容不超過1000本書,圖書館中收藏的書籍大約是百萬本為單位。兩種存儲的存儲容量差距大概是1000倍,而且圖書館中的數據可以被很多人共享。

    20世紀電子與信息技術迅速發展,機器計算迅速普及,馮·諾依曼在1945年6月30日,提出了存儲程序邏輯架構,即現有的計算機都遵循的“馮·諾依曼體系架構”,具體如下圖:

    我們可以看出,馮諾依曼體系結構與人腦(生物)計算模型匹配度相當準確。我們通常把運算器和控制器合并成中央處理器(CPU),內部小容量的存儲提供快速的訪問,外部存儲器提供大容量的存儲空間。在不同的計算機時代,我們可以按照不同的角度來理解馮諾依曼體系結構。在單機計算時代(包括大型機、小型機、微機)內部存儲器可理解為內存(即Memory),外部存儲器可理解為物理硬盤(包括本地硬盤和通過網絡映射的邏輯卷)。在本地硬盤空間不足,可靠性無法滿足業務需求的情況下,SAN存儲出現了,通過網絡映射的邏輯卷(即SAN存儲提供的LUN)成為增強版的硬盤。為了解決數據共享的問題,NAS存儲隨之誕生。

    但馮諾依曼體系架構沒有考慮并行計算和數據共享情形,在如今的網絡時代,大量計算設備通過網絡形成一個龐大、相互獨立但又邏輯統一的計算系統,因此我們可以總結出一個數據存儲的通用模型,這個模型包括兩級存儲,其存儲容量差距約1000倍:

    如果將上圖中每一個計算模塊理解為一個計算內核,那么高速存儲單元則是CPU內的緩存(單位為KB~MB),海量存儲單元則是內存(單位為GB);如果把每一個計算模塊理解為一個CPU,那么高速存儲單元則是內存(單位為GB~TB),海量存儲是物理硬盤或通過網絡映射給服務器的邏輯卷(或網絡文件系統,單位為TB~PB);如果把計算模塊理解為針對某一項任務或某一組任務提供計算能力的服務器集群,把SAN或NAS等擁有TB~PB級存儲規模的網絡存儲設備理解為高速存儲單元,那么具備PB~EB級存儲容量的海量存儲單元將基于什么技術和產品構建呢?

     SAN和NAS技術已經出現了數十年,目前單臺SAN或NAS設備最大容量已經達到PB級別,但在應對EB級數據挑戰時,還是顯得有些力不從心。這主要由于其架構和服務接口決定的。

    SAN使用SCSI協議作為底層協議,SCSI協議管理的粒度非常小,通常以字節(byte)或千字節(KB)為單位;同時SCSI協議沒有提供讀寫鎖機制以確保不同應用并發讀寫時的數據一致性,因此難以實現EB級存儲資源管理和多個服務器/服務器集群之間數據共享。

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
久久精品成人一区二区三区 | 亚洲欧美日韩在线一区| 亚洲国产精品久久精品怡红院 | 国产日韩精品一区二区浪潮av| 欧美日本国产精品| 久久综合九色综合欧美狠狠| 久久se精品一区二区| 亚洲免费网站| 亚洲乱码国产乱码精品精98午夜| 亚洲国产高清在线观看视频| 亚洲第一福利社区| 亚洲第一精品影视| 欧美一区激情| 欧美一区二区黄色| 欧美亚洲在线观看| 性久久久久久久久久久久| 亚洲视频自拍偷拍| 亚洲午夜电影| 亚洲在线网站| 羞羞色国产精品| 欧美一区二区三区视频| 欧美一区二区性| 欧美在线观看视频| 久久精品青青大伊人av| 久久精品国产久精国产思思| 久久国产免费| 亚洲国产精品99久久久久久久久| 亚洲国产精品精华液2区45 | 亚洲一区在线直播| 亚洲欧美国产制服动漫| 午夜精品久久久久久99热| 先锋a资源在线看亚洲| 欧美在线www| 久久精品91| 久久天天躁狠狠躁夜夜爽蜜月| 久热精品视频在线观看一区| 麻豆成人91精品二区三区| 欧美成人精品一区二区| 欧美人与禽猛交乱配视频| 欧美日韩免费观看一区=区三区 | 国产精品区二区三区日本| 国产精品视频一区二区高潮| 国产欧美激情| 海角社区69精品视频| 亚洲高清在线播放| 夜夜精品视频一区二区| 午夜精品久久久久久久蜜桃app| 欧美在线黄色| 亚洲黄色一区二区三区| 在线视频欧美一区| 性做久久久久久久久| 久久综合给合| 欧美精品一区在线| 国产精品久久久| 国产亚洲网站| 最新中文字幕一区二区三区| 亚洲夜晚福利在线观看| 欧美在线亚洲| aa国产精品| 久久国产欧美精品| 蘑菇福利视频一区播放| 欧美日韩伦理在线免费| 国产一区二区看久久| 亚洲人线精品午夜| 香蕉久久夜色精品| 99国产精品久久久久久久久久| 亚洲欧美区自拍先锋| 免费人成网站在线观看欧美高清| 欧美日韩在线免费视频| 国内精品久久久久久久影视麻豆| 亚洲免费黄色| 欧美在线观看网址综合| 一本久久综合亚洲鲁鲁| 久久精品电影| 欧美日韩小视频| 国精产品99永久一区一区| 亚洲精品日韩精品| 性色av一区二区三区在线观看| 亚洲另类自拍| 久久精品免费播放| 欧美视频在线观看免费网址| 伊人成人网在线看| 亚洲一区影院| 一本色道久久综合亚洲二区三区| 久久久噜噜噜久久久| 国产精品毛片一区二区三区| 亚洲高清一二三区| 性久久久久久久久久久久| 亚洲视频碰碰| 欧美国产日韩免费| 国产自产2019最新不卡| 亚洲午夜国产成人av电影男同| 91久久精品一区二区三区| 久久精品女人| 国产精品久久久久久久久借妻 | 国产精品久久中文| 亚洲国产色一区| 欧美一区综合| 欧美在线免费视频| 欧美午夜视频在线观看| 亚洲啪啪91| 久久精品一区蜜桃臀影院| 性色av一区二区三区在线观看| 欧美日韩视频第一区| 在线免费观看日本欧美| 午夜精品久久久| 亚洲午夜精品久久| 欧美精品日日鲁夜夜添| 在线国产欧美| 欧美自拍偷拍| 久久精品国产免费看久久精品| 国产精品萝li| 亚洲视屏一区| 亚洲欧美另类久久久精品2019| 欧美色另类天堂2015| 亚洲精品在线看| 日韩亚洲欧美一区| 欧美成人精品一区二区三区| 伊人久久亚洲美女图片| 久久福利精品| 久久另类ts人妖一区二区| 国产视频一区二区三区在线观看| 亚洲先锋成人| 午夜影视日本亚洲欧洲精品| 国产精品大片| 亚洲一区二区三区四区中文| 亚洲在线中文字幕| 国产精品久久二区| 亚洲女同精品视频| 欧美在线观看一区二区| 国产日韩一区二区三区在线| 亚洲欧美日韩视频一区| 欧美与黑人午夜性猛交久久久| 国产精品中文在线| 香蕉av777xxx色综合一区| 欧美在线观看视频一区二区三区| 国产精品亚洲欧美| 校园激情久久| 久久夜色精品国产| …久久精品99久久香蕉国产| 亚洲欧洲在线视频| 欧美精品一区二区视频| av成人手机在线| 午夜视频一区| 国产区精品在线观看| 欧美一区二区精品在线| 久久久久久一区二区三区| 影音先锋中文字幕一区| 亚洲精品日韩在线观看| 欧美日韩国产综合视频在线观看中文 | 国产美女诱惑一区二区| 欧美在线999| 欧美aⅴ99久久黑人专区| 亚洲美女中文字幕| 亚洲自拍偷拍麻豆| 国产日韩精品在线观看| 久久黄金**| 欧美韩国日本一区| 一本色道久久88亚洲综合88| 欧美一区2区三区4区公司二百| 国产日产欧美精品| 亚洲私人黄色宅男| 久久不射网站| 亚洲第一搞黄网站| 亚洲视频在线观看免费| 国产精品网曝门| 亚洲第一视频网站| 欧美日韩久久不卡| 亚洲欧美欧美一区二区三区| 久久久久久久精| 亚洲欧洲精品一区二区三区波多野1战4| 亚洲综合社区| 激情视频一区二区| 午夜精品理论片| 欧美成人免费视频| 在线视频欧美日韩| 久久精品女人天堂| 亚洲精品日韩精品| 久久精品在这里| 亚洲免费成人av电影| 久久久精品性| 99精品国产福利在线观看免费| 久久爱www久久做| 亚洲精品久久久一区二区三区| 性欧美激情精品| 国产日韩精品一区观看| 日韩一区二区免费看| 国产日韩欧美三区| 亚洲免费成人av电影| 国产精品视频免费观看| 亚洲欧洲日韩在线| 国产精品爽爽爽| 亚洲日韩欧美视频一区| 国产精品无码专区在线观看| 亚洲国产视频a| 国产精品久久午夜| 日韩小视频在线观看| 国产一区二区三区四区hd| 一区二区三区国产精华| 韩国精品久久久999|