《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > 多用戶存儲中自適應動態預取策略
多用戶存儲中自適應動態預取策略
來源:電子技術應用2013年第1期
唐麗梅, 邢素霞, 陳天華
北京工商大學 計算機與信息工程學院, 北京100048
摘要: 通過分析多用戶數據請求規律以及實時分解隨機請求序列來獲取順序請求序列。基于對多用戶順序請求進行命令預分解和命中率統計,實現讀預取長度自我學習。分析多用戶預取率及系統負載與預取失效代價之間的關系,對常規自適應Cache策略進行優化,選擇合適預取閾值等參數。與常規自適應預取策略相比,動態調整Cache策略的預取命中率提高了30%。有效解決了多用戶訪問共享存儲系統的預取失效率高問題。
中圖分類號: TP393
文獻標識碼:
文章編號: 0258-7998(2013)01-0128-04
An adaptive dynamic prefetch strategy in multi-user storage
Tang Limei, Xing Suxia, Chen Tianhua
Computer and Information Department, Beijing Technology and Business University, Beijing 100048, China
Abstract: Dynamic Cache prefetch algorithm is put forward in this paper. Through analysis of the multi-user data request rule, introduction of a dynamic adjustment Cache mechanism. Based on decomposition of multiple users request command,and recording the hit rate statistics by real-time, so to realize multi-user access length self-learning in the shared storage system. After analyzing the simulation results, selecting the appropriate dynamic parameters has improved the prefetch hit rate performance 30% higher than the constant adaptive algorithm.
Key words : Cache; multi-user requests; cost function; prefetch threshold

    預取Cache技術是解決Cache失效開銷的關鍵技術。由于多用戶產生的海量數據訪問往往耗時巨大,因此有必要根據多用戶存儲請求結構設計特定的Cache預取優化機制。通常采用的優化策略可以分為兩類:

    (1)二級Cache結構預取[1]。該策略根據Cache結構設計,通過減小Cache訪問的延遲,提高二級Cache命中率[2];適應面廣,可以應用在儲存優化系統中, 但是對于多用戶海量隨機訪問,預取效率很難有所提高。
    (2)自適應預取策略[3]。該策略考慮了預取的盲目性問題,通過調整預取長度提高預取效率。但是自適應預取只是在連續數據請求的情況下有效,在用戶請求地址完全不連續的情況下,預取數據基本失效。由于自適應預取算法將多用戶數據請求當成隨機數據請求,基本上不預取數據,因此預取性能受到限制。
     通過構建一個智能動態預取策略的優化系統對多用戶訪問服務系統進行優化。其中預取的數據是優化系統能否發揮作用的一個重要因素。因此選擇動態調整Cache大小和調整預取長度相結合的方式。實現了多用戶數據存儲設備通過網絡為所有工作站的共享。
1 相關工作
    參考文獻[1]通過分析Cache失效行為特性,設計了一種步長自適應的二級Cache預取機制,該預取機制動態調整預測訪存模式及預測量。文中所選算法基于自適應算法,該算法僅對用戶數據保存在某一磁盤的連續地址有效,對多用戶訪問的非連續地址訪問對象預取失效。雖然多用戶的數據請求之間的邏輯存儲地址信息是不連續的,但對于每個用戶的數據請求的邏輯存儲地址的分布是連續的,可以把這種數據請求當作不完全的隨機請求,而且是有一定跨度的有規律請求,因此可以通過分解多用戶數據來獲得若干個順序數據請求。再利用自適應方式調整Cache,從而產生本文的多用戶Cache自適應動態預取算法。
    引入Cache結構之后, CPU的訪存時間由Cache命中時間、 Cache失效率[4]、 Cache失效開銷這三個因素共同決定,其決定關系如下:
    Cache訪存時間=Cache命中時間+Cache失效率×Cache失效開銷
    本文的主要設計工作包括:
    (1)分析多用戶請求信息特性,設計一種識別不同用戶數據、調度相應Cache的預取機制。
    (2)分析多用戶請求的Cache失效開銷,調整閾值參數,實時統計命中率。通過分析多用戶請求系統Cache開銷函數,選擇合適的Cache結構參數,最大可能地提高Cache性能[5]。
2 多用戶Cache自適應動態預取機制
2.1識別多用戶數據請求

    多用戶通過網絡服務器系統對存放在磁盤陣列中的數據發出請求,此時的數據請求序列特點是有規律的隨機數據請求,每個用戶的數據請求邏輯存儲地址的分布是連續的[3]。針對多用戶,引入每個用戶的唯一標識ID,由此產生分布式訪問各磁盤組的請求序列。磁盤陣列控制器在接收到主機發送過來的、包含邏輯地址數據信息的多個用戶讀請求命令后,將該命令進行預命令分解,并生成各物理盤的磁盤讀請求子命令。子命令信息包括邏輯首地址、數據長度、用戶ID號及訪問次數。只要將請求的邏輯首地址和數據長度與Cache組中記錄的值相比較,就可以快速查找出當前請求的數據是否在Cache組中。多用戶訪問預取的整個流程如圖1所示。
2.2 工作流程
     磁盤陣列包括N個磁盤Cache組,每個磁盤Cache組中有M個Cache區。Cache區數目則是根據磁盤陣列接收順序請求的數目和預取閾值H確定。本算法將每個順序請求定位調度給Cache組中相應的Cache區間。圖2中A、B、C緩存區間分別代表調度給A、B、C三個用戶的請求序列的Cache區間,這三個順序請求序列交錯組成一個磁盤組隨機請求序列。
   在多用戶查詢Cache組過程中, 無論是否命中Cache區間, 都要對Cache進行更新。Cache區間的具體更新過程如下:
    (1)若命中預取區間,則將命中項計數器Count值加1。然后將新命中數據塊放入Cache區地址單元的頭部。
    (2)若沒有命中Cache組中的任何一個有效項,則所有有效項的Count計數值減1, 同時在預取Cache組中分配一個新區間,并將該區間的Count值置1。在Cache組內淘汰Count值最小的Cache數據塊。
    動態Cache預取算法用來以優化自適應算法的另一措施是通過預取命中率實時統計來調整預取長度參數。通過設置一個窗口函數[5],在窗口滑動之前,Cache命中次數為H,統計出滑動到某一位置時Cache命中次數Hs。這樣就可以得到Cache命中率p=H/Hs。下面定義命中率的函數f(p)。設當前窗口長度為Dcur,滑動后的長度


2.3 算法分析
  多用戶系統存在多個用戶共享一臺服務器的情況。多用戶訪問采取M/ G/ 1排隊模型[6],兩個參數為λ1和λ2的poisson流請求同時進入服務器處理系統。用戶向共享服務器發出請求命令,服務器空閑時用戶能夠得到立即服務,否則排隊等待。
    多用戶訪問泊松輸入如圖3所示。服務器處理兩種請求:(1)常規請求,不能直接從本地磁盤上的預讀Cache中得到用戶請求響應;(2)預取請求,可以由Cache直接響應的請求。所有用戶發出的服務器請求具有相同的優先級,它們加入同一個隊列等待服務。假設用戶請求不調用磁盤數據傳輸時,則消耗的系統資源非常少,因此當用戶請求可從緩存Cache中滿足時,此次請求將不會產生系統代價。

   

3 測試及分析
    本文以視頻服務器為例對以上算法進行驗證。在視頻網絡服務器系統中模擬5個用戶訪問1 000個共享數據, 并讓用戶對服務器進行長時間的訪問。記錄用戶對磁盤陣列中數據不同訪問次數下的預取命中率,動態預取算法與自適應[6]預取的命中率對比如圖4所示,明顯看到動態Cache預取算法具有更好的預取效果。
    使用Iometer測試軟件模擬在多用戶數據請求條件下,分別測試自適應預取策略和動態預取算法性能。將磁盤陣列上的硬盤分為5個分區,模擬5個吧順序用戶請求,兩種算法測試性能對比如表1所示。

    動態Cache預取算法在達到2個用戶數時,體現出更大的優越性,此時常規自適應預取算法的I/O傳輸率下降了60%,而動態Cache預取算法的I/O傳輸率沒有任何下降。但是Cache組Cache區間的個數與多用戶請求序列數必須同比增加,否則算法的性能下降很大。原因是當順序請求序列數大于磁盤Cache組的Cache區間數時,導致Cache命中率下降。因此通過相應加大磁盤Cache組中Cache區間的數目來實現高效的磁盤預取性能。
    在單和多用戶系統中,固定式aIO/aT,系統容量越大,預取閾值就越高。然而,僅在多用戶系統中的預取閾值受系統負載f的影響。通過分析3個重要函數:代價函數C、預取率λ2的最佳值及預取閾值H,達到動態調整系統緩存負載f來獲得最小的預取閾值H,識別并分解多用戶個人信息,動態調度Cache區間,減小Cache負載,從而得到最高預取命中率,解決了多用戶訪問共享服務系統中預取失效率高的問題。
參考文獻
[1] 靳強, 郭陽, 魯建壯. 一種步長自適應二級Cache預取機制[J].計算機工程與應用,2011,47(29):56-59.
[2] 徐煒遐, 李瓊, 蔣艷凰. 一種自適應負載的I/O調度算法[J].計算機工程與科學,2009,31(11):1-29.
[3] 張敏.一種基于SAS技術的高性能硬件磁盤陣列的設計與實現[D].江西:南昌大學,2007.
[4] 張燕,胡英堅,姜濤. 基于排隊網絡RAID存儲系統的性能評價模型[J].長春工業大學報(自然科學版),2010,1(3):471-475.
[5] 姜國松,謝長生,丁紅,等.RAID控制器中I/O調度算法研究[J].小型微型計算機系統,2008,29(4):773-776.
[6] 王培. 網格環境下基于滑動窗口的信任模型研究[D]. 秦皇島:燕山大學,2010.
[7] ALEXANDER T. Performance,reliability,and perform ability aspects of Hierarchical RAID[C]. Proceedings-6th IEEE International Conference on Networking, Architecture, and Storage, NAS2011.

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲欧美制服另类日韩| 免费成人美女女| 91久久久久久久久| 小处雏高清一区二区三区| 亚洲另类春色国产| 亚洲国产综合在线| 亚洲国产精品久久久久| 伊人蜜桃色噜噜激情综合| 国产综合色一区二区三区| 国产欧美一区二区精品秋霞影院| 欧美日韩中文字幕日韩欧美| 欧美区视频在线观看| 欧美精品一区二区久久婷婷| 欧美激情欧美狂野欧美精品| 欧美伦理91i| 欧美精品麻豆| 欧美黄色一区| 欧美日韩国产影院| 欧美日韩小视频| 国产精品第一区| 国产精品久久久一区二区| 国产精品乱码一区二区三区| 国产精品男女猛烈高潮激情 | 欧美日本一区二区三区| 欧美激情一区二区三区在线| 欧美人在线观看| 国产精品成人一区二区三区夜夜夜| 欧美日韩视频在线| 国产精品久久一区主播| 国产日韩欧美成人| 又紧又大又爽精品一区二区| 亚洲精品黄色| 亚洲一区二区三区四区中文| 午夜久久福利| 亚洲黄色尤物视频| 一本不卡影院| 亚洲欧美精品伊人久久| 久久av红桃一区二区小说| 久久一区二区三区国产精品| 欧美激情四色 | 有坂深雪在线一区| 亚洲欧洲日本专区| 亚洲一区二区三区四区五区午夜| 欧美一区二区三区四区在线观看| 久久精品视频va| 99视频有精品| 欧美一区二区在线免费播放| 麻豆精品一区二区av白丝在线| 欧美激情中文不卡| 国产精品毛片大码女人| 国产一区二区三区免费不卡 | 久久综合色综合88| 欧美大色视频| 国产精品海角社区在线观看| 国产亚洲欧美另类中文| 亚洲国产视频直播| 亚洲午夜一区二区| 久久成人一区| 一本不卡影院| 久久久久一区二区三区| 欧美精品v国产精品v日韩精品| 国产精品免费久久久久久| 国一区二区在线观看| 亚洲欧洲中文日韩久久av乱码| 亚洲免费中文字幕| 亚洲精品国产精品国自产观看 | 欧美日本国产精品| 国产综合欧美在线看| 在线视频欧美一区| 亚洲国产精品一区二区www在线| 亚洲一区二区三区精品动漫| 久久蜜桃香蕉精品一区二区三区| 欧美日韩国产成人在线91| 国产自产女人91一区在线观看| 日韩天堂av| 亚洲国产欧美日韩精品| 亚洲欧美日韩中文播放| 欧美国产精品人人做人人爱| 国产亚洲精品aa午夜观看| 亚洲看片免费| 亚洲激情视频网| 久久高清国产| 国产精品v亚洲精品v日韩精品| 在线观看日韩www视频免费| 亚洲女性裸体视频| 在线中文字幕不卡| 欧美sm极限捆绑bd| 黑人极品videos精品欧美裸| 亚洲女ⅴideoshd黑人| 中日韩男男gay无套| 欧美va亚洲va国产综合| 国产永久精品大片wwwapp| 亚洲视频 欧洲视频| 99视频+国产日韩欧美| 蜜桃av一区二区三区| 国产日产高清欧美一区二区三区| 99精品欧美一区| 亚洲精品美女91| 美女国内精品自产拍在线播放| 国产亚洲欧美激情| 亚洲欧美激情四射在线日 | 亚洲欧美精品在线观看| 亚洲一级在线观看| 欧美人与禽猛交乱配视频| 亚洲国产三级网| 亚洲欧洲视频| 蜜臀久久99精品久久久久久9 | 亚洲国产裸拍裸体视频在线观看乱了中文 | 性做久久久久久| 欧美午夜a级限制福利片| 最新国产乱人伦偷精品免费网站 | 99在线精品免费视频九九视| 欧美a级片网站| 在线观看视频亚洲| 亚洲啪啪91| 美女视频黄a大片欧美| 韩曰欧美视频免费观看| 欧美在线不卡视频| 久久精品女人的天堂av| 国产亚洲精品激情久久| 欧美一区二区三区在线观看| 久久久99国产精品免费| 韩国欧美一区| 亚洲二区视频| 麻豆9191精品国产| 亚洲国产精品传媒在线观看| 日韩一级二级三级| 欧美久久久久免费| 一本久久青青| 亚洲欧美日韩成人| 国产日产欧产精品推荐色 | 中日韩美女免费视频网址在线观看| 亚洲婷婷综合久久一本伊一区| 欧美三区视频| 亚洲在线一区二区| 久久精品30| 怡红院精品视频| 亚洲乱码国产乱码精品精可以看| 欧美精品色一区二区三区| 99国产精品久久久久久久久久| 亚洲综合日韩在线| 国产乱码精品一区二区三区忘忧草 | 日韩一级大片| 国产精品国产a级| 午夜久久99| 欧美成年人视频| 妖精视频成人观看www| 篠田优中文在线播放第一区| 国际精品欧美精品| 日韩一级精品| 国产精品日日摸夜夜摸av| 久久国产精品99国产| 欧美电影专区| 99精品欧美一区二区三区| 欧美在线黄色| 亚洲国产综合视频在线观看| 亚洲女同同性videoxma| 国语自产偷拍精品视频偷 | 亚洲欧美日韩在线| 伊人色综合久久天天| 中文无字幕一区二区三区| 国产麻豆综合| 日韩视频免费观看高清完整版| 国产精品ⅴa在线观看h| 久久国产精彩视频| 欧美日韩在线一区二区三区| 欧美伊人久久| 欧美美女bb生活片| 亚洲欧美日韩精品久久奇米色影视| 老司机精品导航| 亚洲一区二区欧美日韩| 免费亚洲电影| 亚洲免费在线观看| 欧美激情1区| 午夜一区二区三视频在线观看| 欧美成人dvd在线视频| 亚洲一区亚洲| 欧美激情在线观看| 欧美一区视频在线| 欧美三级在线视频| 亚洲国产日韩一区| 国产精品羞羞答答xxdd| 亚洲精品久久久久久久久| 国产精品一区二区三区久久| 一本色道久久综合亚洲精品婷婷| 国产麻豆视频精品| 一道本一区二区| 韩曰欧美视频免费观看| 亚洲欧美久久| 亚洲乱码一区二区| 免费成人av在线| 欧美一站二站| 国产精品青草久久久久福利99| 亚洲每日在线| 狠狠色香婷婷久久亚洲精品| 亚洲欧洲av一区二区三区久久| 亚洲国产综合在线| 久久综合九色综合欧美就去吻| 亚洲香蕉视频| 欧美日韩人人澡狠狠躁视频|