《電子技術應用》
您所在的位置:首頁 > 模擬設計 > 市場分析 > 大數據解決之道:華為OceanStorMVX存儲系統技術漫談

大數據解決之道:華為OceanStorMVX存儲系統技術漫談

2012-09-10
關鍵詞: 大數據 存儲

    大數據時代,用戶處理的數據量越來越大,需要的容量越來越大;保存的數據越來越多樣越來越復雜,包括不同的來源,不同的格式,包括結構化和非結構化數據等;需要的訪問速度越來越高,訪問延遲越來越低;對數據價值的挖掘能力要求越來越高。

    根據Gartner的分析,滿足大數據的IT架構,至少應具備下面幾個特征

    1) 橫向擴展: 可以線性橫向擴展而沒有性能影響

    2) 低成本組件:通過使用消費級硬件,降低采購成本

    3) 高可用:硬件故障作為常態而非特例來解決

    4) 不共享架構:節點之間相互獨立

    我們以此為基礎,逐步揭開MVX的面紗。

    Scale-uporScale-out

    傳統的NAS設備一般使用雙控制器節點提供服務,每個節點支持特定的業務負載,當容量不夠時通過擴展磁盤框的方式增加存儲容量。這種方式的缺陷在于,首先業務和節點的綁定,意味著一個業務及其關聯的文件系統只在一個節點上工作,容易造成系統整體的負載不均。其次,這種系統本質上是Scale-up的擴容方式,追求單機性能,無法做到系統性能隨容量的增加線性增加。Scale-Out方式則是橫向擴展,疊加容量或性能節點,使容量性能得到擴展。

    華為OceanStorMVX存儲系統(以下簡稱MVX)采用Scale-out架構,節點之間完全對稱,采用全Active的Sharenothing方式,系統的數據和管理數據(元數據)分布在各個節點上,避免了系統資源爭用,消除了系統瓶頸;即使出現整節點故障,系統能夠自動識別故障節點,自動恢復故障節點涉及的數據和元數據,使故障對業務透明,完全不影響業務連續性。MVX支持3-288節點的彈性空間,100PB的全局統一命名空間,并且支持文件內的細粒度的全局鎖,支持從多個節點并發訪問相同文件的不同區域,實現高并發讀,最終實現高性能的訪問系統。MVX系統采用全互聯組網機制,節點間采用10GE或者Infiniband高速互聯,適配客戶不同的組網需求,支持從集群任何一個節點并發訪問系統中的任何文件。所以MVX通過節點的擴展來解決海量容量的增長,同時還能保持性能線性增長,以此滿足業務發展需求。

    MVX系統對數據和元數據分開管理,這樣做帶來的好處,MVX可以在存儲容量不變的情況下,通過增加性能加速節點,進一步顯著提高系統對IO的響應能力,最終向用戶提供卓越的性能。

    分布式Raid

    傳統Raid,把數據存放在一個節點內的不同硬盤上,當一個硬盤損壞時,通過Raid重構,恢復壞盤上的數據,但當整個節點故障時,整節點的數據就會出現丟失,針對這個問題,可以通過在節點間寫多份來解決。節點間寫多份可以解決傳統RAID整節點故障時丟數據的問題,但磁盤利用率很低,導致高TCO。 MVX的數據通過分布式RAID,節點間冗余的方式進行保護,數據進入系統之后,被切分為N個數據片,然后計算出M個冗余分片,保存在N+M個不同節點的不同硬盤上。這種N+M的冗余模式可以對任意目錄進行重新配置,甚至可以對同一目錄下的不同文件配置不同的冗余比。這意味著用戶可以靈活多變地根據自己的實際需求來指定數據冗余,從而設置不同的可靠性。

    集群節點中,任意不超過M個硬盤故障后,MVX可以通過節點間數據重構的方式快速恢復出所損失的數據,進而恢復整系統的數據可靠性。集群中任意節點故障后,該節點所提供的服務會被自動遷移到其他節點上,使得故障對業務無感知。通過把數據分片寫到不同的節點上,不僅可以提高讀寫性能,又能保證數據的高可靠性,還能保持高的磁盤利用率,節約投資。

    分級存儲和桌面盤

    MVX產品對用戶提供統一命名空間,組成統一命名空間的設備可以由不同系列的硬件組成,當高性能設備和大容量設備同時存在時,系統會自動識別并形成分級存儲。

    大容量節點可以使用桌面級硬盤。桌面級硬盤成本比較低,但是這種硬盤相對企業級硬盤來說,對業務的占空比要求比較苛刻,另外能持續在線工作的時間也比較短。MVX系統由于實現了自動在線分級,并且支持對硬盤下電,可以極大縮短硬盤在線工作的時間,在綠色節能的同時延長硬盤使用壽命。MVX通過支持桌面級硬盤在離線存儲中的應用,大幅降低企業的采購成本。

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲一区二区在线视频| 亚洲国产一区在线观看| 伊人狠狠色丁香综合尤物| 国产精品白丝av嫩草影院| 欧美激情一区二区三区蜜桃视频| 久久久亚洲国产美女国产盗摄| 亚洲欧美卡通另类91av | 亚洲午夜精品一区二区| 亚洲免费成人| 亚洲精品视频一区| 亚洲人成网在线播放| 亚洲国产精品电影在线观看| 亚洲国产精品热久久| 亚洲第一精品夜夜躁人人躁| 精久久久久久| 尤物在线观看一区| 1024成人| 日韩视频在线免费| 一区二区三区国产精品| 亚洲婷婷综合色高清在线| 亚洲视频一区二区| 午夜精品999| 午夜精品久久久久久久久久久 | 亚洲成人直播| 亚洲国产婷婷综合在线精品| 亚洲三级电影在线观看 | 欧美黄色小视频| 欧美成人精品激情在线观看 | 1000部国产精品成人观看| 原创国产精品91| 亚洲经典一区| 99热精品在线| 亚洲欧美资源在线| 久久国产成人| 99精品久久久| 亚洲欧美国产精品va在线观看| 午夜精品成人在线视频| 久久精品视频在线观看| 久久只有精品| 欧美日本免费一区二区三区| 欧美午夜国产| 国产一区二区三区久久久久久久久| 精品91在线| 亚洲美女黄网| 亚洲欧美国内爽妇网| 欧美中文在线观看| 亚洲最新视频在线| 香蕉乱码成人久久天堂爱免费| 久久九九有精品国产23| 欧美成人国产| 国产精品网红福利| 尤物99国产成人精品视频| 日韩亚洲视频| 欧美一区二区成人6969| 亚洲精品视频在线播放| 亚洲欧美日韩国产一区二区三区| 久久久久国产精品人| 欧美日韩国产三级| 国产视频一区在线观看一区免费| 亚洲大胆在线| 亚洲午夜久久久久久久久电影院| 亚洲风情在线资源站| 亚洲一区在线播放| 久久综合五月| 欧美午夜视频| …久久精品99久久香蕉国产| 在线视频欧美精品| 亚洲第一色中文字幕| 亚洲欧美日韩精品久久久| 久久夜色精品国产亚洲aⅴ| 欧美日韩精品免费| 红桃视频成人| 亚洲视频欧洲视频| 亚洲精品国精品久久99热一| 亚洲欧美日韩一区在线| 模特精品在线| 国产婷婷精品| 在线一区欧美| 日韩午夜电影在线观看| 久久成人资源| 欧美日韩亚洲系列| 亚洲电影在线观看| 欧美一区二区在线播放| 亚洲一卡二卡三卡四卡五卡| 免费高清在线视频一区·| 国产日韩av在线播放| 一本不卡影院| 亚洲黑丝在线| 久久久久国产一区二区三区| 欧美日韩影院| 亚洲激情六月丁香| 久久精品二区| 欧美在线|欧美| 国产精品成av人在线视午夜片| 亚洲欧洲在线一区| 亚洲国产乱码最新视频 | 欧美一区二区成人6969| 欧美日韩亚洲一区二区三区在线| 韩日精品在线| 欧美一级成年大片在线观看| 亚洲综合第一| 欧美视频在线观看一区二区| 亚洲国产欧美一区二区三区同亚洲| 欧美一区激情视频在线观看| 午夜亚洲福利| 国产精品电影观看| 夜久久久久久| 亚洲午夜一区| 欧美午夜精品久久久久久浪潮| 亚洲理论在线| 日韩一二三在线视频播| 欧美va亚洲va日韩∨a综合色| 一区二区视频在线观看| 亚洲第一天堂av| 久久人人爽国产| 狠狠色综合日日| 亚洲国产成人午夜在线一区| 久久综合色8888| 在线视频国内自拍亚洲视频| 亚洲黄色在线| 欧美成人激情视频| 91久久极品少妇xxxxⅹ软件| 亚洲免费成人av| 欧美日本久久| 中国女人久久久| 午夜精品久久久久久久99水蜜桃| 国产精品乱码妇女bbbb| 亚洲影院高清在线| 欧美中文在线视频| 国内精品美女在线观看| 亚洲国产成人91精品| 欧美成人精品不卡视频在线观看| 亚洲国产精品久久久久久女王| 亚洲精品一区二区三区99| 欧美理论片在线观看| 99人久久精品视频最新地址| 亚洲欧美日本国产有色| 国产啪精品视频| 亚洲国产天堂久久综合网| 欧美精品久久久久久久免费观看| 日韩网站在线看片你懂的| 亚洲在线视频观看| 国产亚洲成精品久久| 亚洲国产老妈| 欧美日韩三级视频| 亚洲欧美在线x视频| 久久久久综合一区二区三区| 亚洲第一精品夜夜躁人人爽| 一本色道久久99精品综合| 国产精品播放| 久久9热精品视频| 欧美大片免费观看| 一区二区三区欧美亚洲| 性欧美大战久久久久久久久| 黄色小说综合网站| 夜夜嗨av一区二区三区四区| 国产精品日韩欧美| 亚洲高清不卡在线| 欧美日韩亚洲一区二区三区在线观看| 亚洲性视频网站| 噜噜爱69成人精品| 日韩视频在线播放| 久久精品av麻豆的观看方式| 亚洲国产精品综合| 亚洲欧洲av一区二区三区久久| 一区二区三区在线观看视频| 中国女人久久久| 国产一区二区日韩| av成人老司机| 国产亚洲二区| 一区二区电影免费在线观看| 国产欧美精品一区二区三区介绍| 91久久线看在观草草青青| 国产精品成人国产乱一区| 久久狠狠一本精品综合网| 欧美三级视频在线播放| 亚洲第一福利社区| 欧美手机在线| 亚洲国产另类久久精品| 国产精品日韩在线播放| 最新成人在线| 国产女主播一区| 99爱精品视频| 国语自产在线不卡| 亚洲自拍偷拍色片视频| 亚洲国产高清在线| 久久高清国产| 一区二区三区黄色| 免费影视亚洲| 欧美在线播放一区| 国产精品jizz在线观看美国| 亚洲黄色影院| 国产视频精品免费播放| 亚洲视频在线一区| 亚洲激情在线观看| 久久亚洲精品一区二区| 亚洲免费在线电影| 欧美日韩一区二区在线播放| 亚洲盗摄视频| 国产日韩欧美91|