《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > 分布式對象存儲——信息爆炸時代的“超級數據圖書館”
分布式對象存儲——信息爆炸時代的“超級數據圖書館”
CCTIME
CCTIME
摘要: 分布式,存儲,數據,存儲,,華為,更清晰的認識我們所生存的環境,提高人際溝通效率,人們收集和創造了大量的數據,有些是對物理世界的客觀描述,如原子和分子的組成,或是DNA螺旋結構;也包括煙波浩渺的宇宙中的星系和星云;亦或是人類對自身歷史的記錄;還有一些數據被用于人們相互溝通,
Abstract:
Key words :
</a>數據" title="數據">數據" title="數據">數據的產生及信息爆炸帶來的挑戰

    為了更清晰的認識我們所生存的環境,提高人際溝通效率,人們收集和創造了大量的數據,有些是對物理世界的客觀描述,如原子和分子的組成,或是DNA螺旋結構;也包括煙波浩渺的宇宙中的星系和星云;亦或是人類對自身歷史的記錄;還有一些數據被用于人們相互溝通,如Facebook上每天新增數十億條內容,或每天被發送的數千億封郵件。

    隨著人們對客觀世界的逐步認知,人際溝通的效率越來越高,人們的溝通與生活也越來越豐富,人類收集和創造的數據也越來越多,這些數據飽含信息與知識,是人類智慧與勤勞的結晶,是人類寶貴的信息資產。一部《史記》,共52萬6千500字,約1MB數據;一組用于基因研究的染色體照片數據量超過2TB;歐洲核子研究中心(CERN)每年有超過20PB數據通過全球最大的大型強子對撞機(LHC)被收集起來用于微觀粒子研究。根據IDC的分析,2011年全球數據產生量達到1.8ZB,到2020年這個數字將增長50倍(1ZB=1,000EB=1,000,000PB),如此大規模的數據給存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲" title="存儲">存儲系統帶來了巨大的挑戰,人類將如何應對咆哮而來的數據洪流?

    存儲方案的演進

    在人類發明和使用電子計算機以前,數據處理由人類大腦完成,大腦中還同時存儲了大量信息用于支撐數據處理,人類大腦存儲的信息依然相對有限,仍有大量數據被存儲在圖書館。當有需要的時候,人們便會到圖書館獲取更多的數據。以此我們可以總結出如下的一種數據存儲與數據處理模型:

    該模型包括三個部分,計算單元、內部存儲單元(低延遲,容量偏小)、外部存儲單元(延遲增加,容量超大)。如果按照對圖書的存儲(記憶)能力來估算,通常一個人大腦中能記憶的內容不超過1000本書,圖書館中收藏的書籍大約是百萬本為單位。兩種存儲的存儲容量差距大概是1000倍,而且圖書館中的數據可以被很多人共享。

    20世紀電子與信息技術迅速發展,機器計算迅速普及,馮·諾依曼在1945年6月30日,提出了存儲程序邏輯架構,即現有的計算機都遵循的“馮·諾依曼體系架構”,具體如下圖:

    我們可以看出,馮諾依曼體系結構與人腦(生物)計算模型匹配度相當準確。我們通常把運算器和控制器合并成中央處理器(CPU),內部小容量的存儲提供快速的訪問,外部存儲器提供大容量的存儲空間。在不同的計算機時代,我們可以按照不同的角度來理解馮諾依曼體系結構。在單機計算時代(包括大型機、小型機、微機)內部存儲器可理解為內存(即Memory),外部存儲器可理解為物理硬盤(包括本地硬盤和通過網絡映射的邏輯卷)。在本地硬盤空間不足,可靠性無法滿足業務需求的情況下,SAN存儲出現了,通過網絡映射的邏輯卷(即SAN存儲提供的LUN)成為增強版的硬盤。為了解決數據共享的問題,NAS存儲隨之誕生。

    但馮諾依曼體系架構沒有考慮并行計算和數據共享情形,在如今的網絡時代,大量計算設備通過網絡形成一個龐大、相互獨立但又邏輯統一的計算系統,因此我們可以總結出一個數據存儲的通用模型,這個模型包括兩級存儲,其存儲容量差距約1000倍:

    如果將上圖中每一個計算模塊理解為一個計算內核,那么高速存儲單元則是CPU內的緩存(單位為KB~MB),海量存儲單元則是內存(單位為GB);如果把每一個計算模塊理解為一個CPU,那么高速存儲單元則是內存(單位為GB~TB),海量存儲是物理硬盤或通過網絡映射給服務器的邏輯卷(或網絡文件系統,單位為TB~PB);如果把計算模塊理解為針對某一項任務或某一組任務提供計算能力的服務器集群,把SAN或NAS等擁有TB~PB級存儲規模的網絡存儲設備理解為高速存儲單元,那么具備PB~EB級存儲容量的海量存儲單元將基于什么技術和產品構建呢?

     SAN和NAS技術已經出現了數十年,目前單臺SAN或NAS設備最大容量已經達到PB級別,但在應對EB級數據挑戰時,還是顯得有些力不從心。這主要由于其架構和服務接口決定的。

    SAN使用SCSI協議作為底層協議,SCSI協議管理的粒度非常小,通常以字節(byte)或千字節(KB)為單位;同時SCSI協議沒有提供讀寫鎖機制以確保不同應用并發讀寫時的數據一致性,因此難以實現EB級存儲資源管理和多個服務器/服務器集群之間數據共享。

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
久久精品视频在线| 欧美日韩专区| 亚洲午夜精品网| 亚洲精品免费一区二区三区| 久久成人精品视频| 亚洲在线观看免费| 一区二区三区日韩精品| 亚洲欧洲精品一区二区三区波多野1战4 | 国产精品九色蝌蚪自拍| 欧美伦理一区二区| 欧美岛国激情| 欧美电影在线观看完整版| 美国成人毛片| 久久永久免费| 久久这里只有| 欧美成人国产| 欧美高清免费| 欧美精品一区二区三区很污很色的| 免费欧美日韩| 欧美成ee人免费视频| 美女国内精品自产拍在线播放| 久久久在线视频| 久久久夜夜夜| 免费精品99久久国产综合精品| 久久综合影音| 欧美69wwwcom| 欧美人与性禽动交情品| 欧美日韩国产美| 欧美视频在线观看免费网址| 欧美色大人视频| 国产精品久久久久av| 国产精品午夜在线| 久久黄色网页| 午夜精品一区二区三区在线播放| 亚洲综合视频在线| 欧美一区二区精品久久911| 久久精品久久综合| 久久免费国产| 欧美护士18xxxxhd| 欧美日韩一区高清| 国产精品一区在线播放| 国产一区二区三区四区五区美女 | 一区二区三区福利| 亚洲女人小视频在线观看| 午夜精品一区二区三区在线| 久久精品夜夜夜夜久久| 最新国产精品拍自在线播放| 一本色道久久综合亚洲精品不卡 | 国产欧美一区视频| 在线欧美日韩精品| 亚洲最黄网站| 久久精品国产第一区二区三区| 日韩午夜激情| 久久激情视频久久| 欧美激情精品久久久久久黑人| 欧美视频精品在线| 国产一区二区三区日韩| 亚洲日韩欧美视频一区| 午夜久久黄色| 一区二区91| 久久亚洲综合| 欧美日韩国产在线看| 国产日韩精品视频一区二区三区| 亚洲成人原创| 亚洲直播在线一区| 亚洲精品影视| 欧美在线三级| 欧美精品三级日韩久久| 国产伦精品免费视频| 尤物在线精品| 一区二区av在线| 在线视频欧美日韩| 欧美亚洲自偷自偷| 美女精品在线| 亚洲欧美电影在线观看| 亚洲高清在线播放| 在线视频中文亚洲| 欧美中文在线观看| 欧美激情国产精品| 国产精品一二三四| 亚洲国产日韩精品| 在线亚洲欧美| 亚洲一区二区在线免费观看视频 | 亚洲国产精品久久| 亚洲视屏在线播放| 久久久久国产一区二区| 亚洲视频1区| 欧美在线啊v| 国产精品豆花视频| 极品尤物久久久av免费看| 亚洲精品欧美一区二区三区| 亚洲综合大片69999| 亚洲第一综合天堂另类专| 亚洲午夜久久久久久久久电影网| 久久riav二区三区| 欧美久久一级| 韩国欧美一区| 亚洲精品免费一二三区| 亚洲国产一区二区a毛片| 亚洲男人第一网站| 模特精品裸拍一区| 国产精品日韩精品欧美在线| 亚洲福利视频一区二区| 亚洲欧美日韩国产成人精品影院| 亚洲人成网站色ww在线| 亚洲欧美日韩国产一区| 欧美国产精品劲爆| 国产视频一区二区在线观看| 狠狠88综合久久久久综合网| 一区二区三区久久久| 亚洲国产精品女人久久久| 亚洲欧美国产精品专区久久| 欧美大片网址| 国内揄拍国内精品少妇国语| 亚洲无限av看| 一本高清dvd不卡在线观看| 卡通动漫国产精品| 国产精品亚洲成人| 在线性视频日韩欧美| 欧美日韩亚洲国产精品| 国产精品乱码一区二区三区| 欧美视频中文字幕在线| 在线观看的日韩av| av成人免费观看| 亚洲精品黄色| 欧美在线91| 国产精品夜夜夜| 一本色道**综合亚洲精品蜜桃冫 | 美乳少妇欧美精品| 国产日韩欧美自拍| 亚洲欧美卡通另类91av| 国产欧美另类| 欧美在现视频| 欧美女同视频| 999亚洲国产精| 妖精成人www高清在线观看| 免费观看成人鲁鲁鲁鲁鲁视频| 国模套图日韩精品一区二区| 午夜亚洲福利| 久久精品亚洲国产奇米99| 国产酒店精品激情| 亚洲美女黄色片| 一区二区高清| 欧美三日本三级三级在线播放| 亚洲美女一区| 亚洲网址在线| 欧美小视频在线| 亚洲永久免费视频| 99热这里只有成人精品国产| 欧美日韩免费一区二区三区视频| 日韩午夜免费视频| 亚洲一区二区三区乱码aⅴ蜜桃女| 欧美精品一卡二卡| 亚洲精品久久久蜜桃 | 久久黄金**| 国内精品久久国产| 久久精品日韩欧美| 免费人成精品欧美精品| 亚洲国产精品久久| 99精品国产在热久久婷婷| 欧美日韩在线免费| 亚洲精品国产无天堂网2021| 亚洲天堂激情| 国产精品亚洲综合一区在线观看| 性欧美1819sex性高清| 久久影院午夜论| 国产女同一区二区| 亚洲激情在线播放| 欧美日韩国产一区| 亚洲一级在线观看| 久久精品国产第一区二区三区最新章节| 国产亚洲精品aa午夜观看| 亚洲第一视频| 免费成人av在线看| 一区二区三区欧美亚洲| 久久er精品视频| 亚洲电影欧美电影有声小说| 99精品国产福利在线观看免费| 欧美视频免费在线| 欧美一区二区| 久久综合中文| 一本色道久久综合| 欧美在线亚洲一区| 永久免费毛片在线播放不卡| 亚洲视频1区| 国产亚洲亚洲| 日韩视频永久免费| 亚洲久久成人| 亚洲一区在线观看视频| 久久婷婷成人综合色| 亚洲乱码国产乱码精品精天堂 | 久久九九有精品国产23| 亚洲高清av| 午夜精品视频在线观看一区二区| 韩国一区二区三区在线观看| 亚洲精品乱码久久久久久蜜桃91| 久久精品成人| 亚洲影视在线| 欧美99在线视频观看| 在线视频亚洲欧美|