《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 內存計算在DSP中的應用分析
內存計算在DSP中的應用分析
EEworld
摘要: 所謂“內存計算”,實質上就是CPU直接從內存而不是硬盤上讀取數據,進行計算、分析,是對傳統數據處理方式的一種加速。內存計算非常適合處理海量的數據,以及需要實時獲得結果的數據,比如可以將一個企業近十年幾乎所有的財務、營銷、市場等各方面的數據一次性地保存在內存里,并在此基礎上進行數據的分析。當企業需要做快速的賬務分析,或要對市場進行分析時,內存計算就能夠快速的按照需求完成。
關鍵詞: DSP 內存計算
Abstract:
Key words :

       下面我們來分析一下,到底什么是內存計算,它在企業級關鍵業務領域有著怎樣的應用前景,然后看看英特爾至強E7為什么能夠很好地支持這類應用,從而一起為海量數據實時處理打造一條寬廣的“高速公路”。

  1 內存計算" title="內存計算">內存計算:對海量數據進行實時處理

  今天,許多企業已經面臨越來越多的數據要處理,而且對這些數據需要進行實時的分析。為此,SAP一直在重新構想數據倉庫的運行模式,并提出了內存計算的理念。那么什么是內存計算呢,我們不妨從兩個角度來理解。

  首先,從計算存儲技術的角度看,由于服務器在處理數據時,CPU首先會從其緩存中找數據,緩存中找不到,再從內存中找,內存里沒有,再從硬盤上讀取。在傳統數據庫查詢中,磁盤訪問時間是一個主要的瓶頸。研究發現,如果讓查詢在讀寫速度快很多倍的內存中進行,而不用訪問物理磁盤,將會大大提升處理性能。試想一下,對于商業智能應用而言,由于數據庫一般都較大,少則幾個GB,多則成百上千個GB,如果把整個數據庫都搬到內存中去運行,又會怎樣呢?

  因此,所謂“內存計算”,實質上就是CPU直接從內存而不是硬盤上讀取數據,進行計算、分析,是對傳統數據處理方式的一種加速。內存計算非常適合處理海量的數據,以及需要實時獲得結果的數據,比如可以將一個企業近十年幾乎所有的財務、營銷、市場等各方面的數據一次性地保存在內存里,并在此基礎上進行數據的分析。當企業需要做快速的賬務分析,或要對市場進行分析時,內存計算就能夠快速的按照需求完成。

  其次,從應用的角度來看,在商業智能方案中,在線交易處理(OLTP)和在線分析處理(OLAP)是兩種不同的應用,其中OLTP系統需要對發生的業務進行實時記錄,因此要處理的是大量簡單、小規模、同時發生的交易;而OLAP系統是對OLTP提供的數據進行分析,以支持業務決策,因此處理的交易數量相對較少,但更為復雜。使用內存計算的SAP HANA的交易型和分析型引擎能夠同時應對這兩種應用,內存計算技術實際上是把現在交易型的數據庫和分析型的數據庫合并為一個內存數據庫,其結構如下圖所示:

  

 

  談到SAP HANA的具體應用場景,SAP中國區首席技術官張俠曾對媒體舉過這樣一個例子:航空公司。航空公司的主要特點就是信息量大,且有很多實時信息,一般會有這樣兩個系統:一是客戶相關的系統,里面有各種客戶的信息,如誰是金卡會員,誰希望坐在靠窗或者靠走道的座位,商務旅客與私人休閑旅客的不同偏好等等;另一個是定票系統,定票系統會把每個航班對應的飛機型號、座位數量、飛機維修、天氣等等信息綜合在一起。高速的內存計算技術能夠綜合所有以上這些情況,根據不同場景進行更好的匹配。比如,利用高速分析的能力對航班晚點的情況進行調配,通過分析發現某些型號的飛機可以在某個飛機轉場。這樣就能把天氣等各種影響降至最低,使客戶盡可能坐在他喜歡坐的位置上,并設計好定價策略做到既能滿足客戶的需求,又能為航空公司帶來更好效益。

  據了解,SAP BusinessObjects戰略性人力規劃是HANA中的第一款新產品,使企業管理者可以實時模擬相關業務場景,快速分析復雜數據關系并審視被建議的組織結構調整對企業業務產生的影響。企業管理者和人力資源高管可以使用預測性建模功能模擬企業人員總數需怎樣增長、人員配置應如何變化等,這使他們能就人員配置或調整做出基于數據的明智決策,尤其是在企業一項收購行為完成以后或者是當企業要進入一個新市場領域的時期。

  2 X86服務器如何滿足內存計算需求

  通過上面的分析,我們知道,為優化海量數據實時處理的內存計算模式對于底層服務器提出了更高的要求:CPU夠不夠快?內存夠不夠大?系統夠不夠穩定可靠?實際上,英特爾與SAP早在10多年前就已經開始合作,不斷共同推動IA架構服務器上SAP應用的性能。下面我們就來看看最新的英特爾至強E7又是如何針對SAP HANA進行優化的。

  

 

    2.1 處理器的性能

  早期處理器性能的提升主要依賴于主頻的提高,即CPU在每個時鐘周期內可以執行更多的指令。但由于能耗與散熱條件的限制,這種方法在2005年左右碰到了障礙。于是業界開始轉向多核處理器的設計,即每個處理器內包含多個相互獨立的計算內核。在多核處理器之前,英特爾開發了超線程技術,允許一個處理內核可以在同一時間執行兩條指令線程,從而更好地利用CPU的片上資源。今天,多核、多線程、高可擴展的SMP架構,為x86服務器奠定了運行SAP應用的基礎。

  與上一代至強7500相比,至強E7的內核數量由8核(16線程)增加到了10核(20線程);同時得益于QPI總線架構,基于至強E7的服務器可以從雙路擴展到四路、八路,直至256路。這些技術進步使得SAP HANA可以在單一系統內獲得更多的計算資源,其性能指標可以隨硬件升級而線性擴展,用戶甚至可以通過部署1000以上內核的系統實現更復雜的實時分析。

  2.2 內存的性能

  對于SAP內存計算應用來說,內存子系統的性能是否強壯顯得非常重要。一方面,64位操作系統的普及,使得今天的x86服務器內存可以超過32位的4個GB,理論上達到幾乎無限制的18 Exabyte(即180億GB);另一方面,隨著平臺技術的發展,以及每GB內存價格的下降,服務器系統內存容量越來越大。今天服務器的內存容量已經可以用TB來計算,每1TB即1000GB。

  具體到至強E7來看,則主要通過大容量緩存、更高內存帶寬、以及更大容量的內存來滿足這一需求。比如,至強7500的三級緩存是24MB,至強E7達到了30MB,這使得SAP HANA應用中,CPU計算內核可以直接從緩存中讀取更多的數據,訪問速度因此更快。在內存方面,以四路服務器為例,至強7500系統可以支持16GB內存條,最大內存容量為1TB,而至強E7系統可以支持32GB的內存條,系統內存容量擴大到2TB。

  當然,在SAP HANA應用中,快速的I/O也很關鍵,至強E7通過QPI互連總線,大大提高CPU與內存之間、CPU與CPU之間以及節點之間的數據傳輸速率,降低延遲。

  2.3 高可用性

  面向海量數據進行實時分析的系統,其對穩定可靠性的要求是不言而喻的。在這方面,新的至強E7服務器平臺在安全可靠性(RAS)方面也提供了更多的支持。比如Double Device Data Correction(DDDC)就對SAP HANA非常有用,允許當內存同時出現兩個錯誤時,也可以恢復。又比如Machine Check Architecture Recovery(MCA Recovery)技術使得SAP HANA可以與操作系統一起,從許多無法糾正的內存錯誤中恢復,在許多場合下可以不用停機就能恢復數據。在至強E7中,類似這樣的RAS技術還有20多條。

  在一個針對32億條POS機銷售記錄的復雜模型中,英特爾與SAP進行了聯合測試,測試表明,跟上一代的至強7500相比,至強E7的性能提高了1.37倍。另外,同樣基于至強E7平臺,英特爾超線程技術性能提升1.21倍,NUMA技術提供1.07倍,睿頻加速(Turbo Boost)技術性能提升1.04倍,如下圖所示:

  

 

  3 內存計算的前景展望

  據了解,在SAP HANA的研發過程中,得到了IBM、惠普、思科、富士通、英特爾等硬件廠商的支持,同時也有可口可樂(希臘)、未來集團(Future Group)、喜利得(Hilti)在參與。比如喜利得(Hilti)是一家為全球建筑市場提供設備和技術的企業,擁有2萬名員工,其中三分之二直接從事與客戶打交道的銷售與工程工作,因此每天會發生超過20萬次客戶接觸。通過SAP HANA,該公司將交易與分析系統進行了融合,在早期測試中,搜索和分析5300萬條客戶數據記錄的時間從原來的2-3個小時,降低到了2-3秒。

  許多服務器廠商也已經推出了基于英特爾至強E7處理器的服務器,并針對SAP HANA開發了相應的解決方案,如IBM的x3690 x5、x3850 x5服務器,戴爾的PowerEdge R910服務器等。IBM宣稱,其SAP HANA工作負載優化方案可以使基于SAP的ERP數據分析應用達到每秒處理1.3TB的數據量,以及每小時進行10000次復雜的組合查詢分析報告。

   

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲美女视频在线免费观看| 亚洲一区二区三区精品在线| 亚洲精品色婷婷福利天堂| 国内视频一区| 国产亚洲亚洲| 国产一区二区精品久久99| 国产欧美日韩精品在线| 国产精品久久久久久久第一福利| 欧美日韩美女在线| 欧美日韩一区二区三区免费 | 午夜精品电影| 亚洲欧美成人一区二区在线电影 | 欧美亚一区二区| 国产精品v欧美精品∨日韩| 欧美日韩国产在线| 欧美三级乱码| 国产精品成人va在线观看| 欧美午夜精品一区| 国产精品久久久久av| 国产精品美女久久久久久久| 国产精品久久久久秋霞鲁丝 | 亚洲日产国产精品| 亚洲理论在线| 一本久久知道综合久久| 一区二区三区久久| 亚洲综合电影| 欧美在线免费视屏| 亚洲国产精品成人精品| 亚洲黄色免费| 亚洲麻豆视频| 亚洲欧美日韩视频二区| 欧美在线亚洲一区| 免费国产一区二区| 欧美三级不卡| 国产日韩欧美在线观看| 国产偷国产偷精品高清尤物| 在线观看视频一区二区| 亚洲日本va午夜在线电影| 中国成人亚色综合网站| 午夜精品短视频| 亚洲激情网站| 亚洲一级片在线观看| 久久狠狠亚洲综合| 欧美成人精品在线观看| 欧美新色视频| 国产综合久久| 日韩视频永久免费观看| 亚洲欧美在线x视频| 91久久精品一区二区别| 亚洲欧美成aⅴ人在线观看| 久热精品视频在线观看一区| 欧美日韩免费高清一区色橹橹| 国产精品精品视频| 永久免费毛片在线播放不卡| 亚洲免费福利视频| 欧美淫片网站| 一区二区欧美视频| 久久久国产精品一区二区中文| 欧美精品一区二区三区高清aⅴ| 国产精品视频一区二区高潮| 在线观看亚洲a| 亚洲午夜av在线| 亚洲国内在线| 欧美亚洲在线播放| 欧美激情第三页| 国产日韩专区| 亚洲最新色图| 亚洲国产精品久久久| 一区二区不卡在线视频 午夜欧美不卡'| 久久国产精品99国产| 欧美另类极品videosbest最新版本| 国产日韩欧美精品一区| 91久久国产精品91久久性色| 先锋影音国产精品| 在线亚洲电影| 久久亚洲色图| 国产精品日韩在线| 亚洲日本电影| 亚洲国产一区视频| 欧美在线影院| 欧美日韩综合| 亚洲国产日韩一级| 久久精品成人一区二区三区蜜臀| 亚洲一区中文| 欧美精品一区二区三区视频| 国产一区二区三区免费不卡| 亚洲视频axxx| 日韩网站在线观看| 久久综合九色九九| 国产亚洲成av人在线观看导航| 99精品国产福利在线观看免费| 亚洲激情影院| 久久天天躁狠狠躁夜夜爽蜜月| 国产精品国产三级国产aⅴ入口| 亚洲高清视频在线观看| 欧美一区二区三区四区高清| 亚洲免费在线视频| 欧美日韩国产三区| 亚洲国产日韩在线| 91久久精品一区二区别| 老司机午夜免费精品视频| 国产一区久久久| 亚洲欧美日韩成人高清在线一区| 亚洲一区二区视频| 欧美日韩伦理在线| 亚洲精品免费在线| 一个色综合av| 欧美日韩一二三区| 日韩视频欧美视频| 一本久道久久综合狠狠爱| 欧美韩日一区二区| 91久久精品视频| 亚洲麻豆av| 欧美日韩第一页| 亚洲日本无吗高清不卡| 日韩亚洲视频在线| 欧美日韩国产在线观看| 亚洲精选在线| 在线视频一区二区| 欧美天天影院| 亚洲四色影视在线观看| 亚洲专区在线视频| 国产精品国产三级国产普通话三级 | 午夜精品视频在线观看| 欧美主播一区二区三区| 国产欧美日韩亚洲| 欧美在线观看一区二区三区| 久久精品国产亚洲精品| 国产午夜精品全部视频在线播放| 亚洲欧美日韩一区二区三区在线观看 | 欧美一区二区三区播放老司机| 国产精品日韩专区| 这里只有精品丝袜| 欧美一区二区大片| 国产一级精品aaaaa看| 久久成人免费| 欧美国产日产韩国视频| 日韩视频在线观看一区二区| 亚洲一区二区三区影院| 国产精品夜色7777狼人| 欧美一级一区| 欧美成人在线影院| 日韩视频中午一区| 亚洲欧美日韩天堂一区二区| 国产热re99久久6国产精品| 久久国产精品久久久久久电车| 鲁大师成人一区二区三区| 亚洲国产一区二区精品专区| 一本色道久久综合亚洲精品按摩| 欧美日韩在线看| 午夜精品在线看| 免费成人av在线| av不卡在线| 久久久精品动漫| 最新精品在线| 午夜精品久久久久久久久久久| 国内精品模特av私拍在线观看| 亚洲精品美女久久久久| 欧美日韩在线精品一区二区三区| 午夜国产一区| 欧美风情在线观看| 亚洲视频视频在线| 久久五月天婷婷| 亚洲免费成人av| 久久精品在线观看| 最近看过的日韩成人| 亚洲男女自偷自拍| 激情五月***国产精品| 国产精品99久久久久久有的能看| 国产精品专区h在线观看| 亚洲欧洲另类国产综合| 国产精品久久久久高潮| 亚洲丰满在线| 欧美日韩一区二区在线视频 | 欧美在线三区| 欧美日本亚洲韩国国产| 午夜精品久久久久久久白皮肤| 美日韩免费视频| 亚洲一级黄色| 米奇777在线欧美播放| 亚洲午夜小视频| 欧美/亚洲一区| 亚洲综合日韩| 欧美精品亚洲精品| 欧美在线观看一二区| 欧美日韩亚洲在线| 亚洲国产成人tv| 国产精品激情偷乱一区二区∴| 亚洲黄色小视频| 国产精品男gay被猛男狂揉视频| 91久久精品一区| 国产日韩欧美日韩| 亚洲亚洲精品三区日韩精品在线视频 | 性欧美大战久久久久久久久| 欧美日韩1234| 亚洲国产99精品国自产| 国产精品一区二区你懂的| aa亚洲婷婷| 影音先锋国产精品| 欧美一区激情视频在线观看|