《電子技術應用》
您所在的位置:首頁 > 人工智能 > 業界動態 > 清華大學團隊刷屏的芯片和論文,對AI意味著什么?

清華大學團隊刷屏的芯片和論文,對AI意味著什么?

2023-11-09
作者: 李飛
來源:半導體行業觀察
關鍵詞: 芯片 清華大學 AI

  早陣子,國內清華大學研究團隊發布了一篇論文,里面談及了一款領先的芯片和設計。這個新聞在朋友圈引起了廣泛討論。那么這是個什么芯片?對AI又意味著什么?讓我們在本文解讀一下。

  以下為文章正文:

  人工智能是目前半導體芯片行業最重要的市場驅動力之一,同時也是當下最有潛力深刻改變整個人類社會的技術。當前,最主流的人工智能算法加速芯片是GPU,但是GPU加速人工智能有著自己的瓶頸,就是能效比較低。GPU的功耗通常要幾百瓦,這就使得大規模部署人工智能充滿了挑戰:一方面大規模數據中心需要確保散熱足夠好,不至于讓GPU過熱而無法工作;另一方面,GPU很高的功耗又為數據中心帶來了很高的供電成本和需求。

  GPU,以及其他絕大多數人工智能加速芯片,都屬于常規的數字邏輯的計算范式。使用數字邏輯計算存在幾個重要的局限性:

  首先,信號必須要做數字化,而很多人工智能任務處理的輸入(例如機器視覺任務)實際上并非人工的數字信息而是物理信號。這樣的物理信號數字化就會帶來能量的浪費。

  其次,在數字邏輯中,有一個全局的時鐘,而時鐘頻率則決定了整個系統的處理速度。數字邏輯的時鐘頻率往往決定于芯片工藝實現的邏輯門的速度(延遲),而并非由處理任務的復雜程度決定,因此這樣的數字時鐘事實上也限制了整體芯片處理任務能實現的速度。

  最后,數字邏輯的設計中,尤其是對于處理人工智能相關的任務,通常都需要配合一個存儲單元(尤其是像GPU需要配合DRAM使用),這樣的數據存取和讀取事實上會消耗相當大的能量。

  與傳統的數字邏輯計算范式相比,新模態計算則是使用了非常規的信號處理和計算方法(例如光學處理以及模擬信號處理),從而可以很大程度上避免數字邏輯計算中的幾大局限,并且有望為人工智能的高能效比計算帶來新的希望。

  10月底,來自中國清華大學的研究組在頂級期刊《自然》上發表了使用新模態計算加速人工智能的論文《All-analog photoelectronic chip for high-speed vision tasks》。在該論文中,清華大學的研究團隊提出了使用光學和模擬計算來加速人工智能計算的技術,即all-analog chip combining electronic and light computing (全模擬電子和光子計算芯片,ACCEL),并且實現了相當高的計算性能和能效比(等效算力4600TOP/s,能效比74800TOP/s/W),相當于Nvidia A100 GPU的3000倍以上。

 微信截圖_20231109093836.png

  ACCEL的結構如下圖所示。

  微信截圖_20231109093857.png

  首先,如論文標題所說的,ACCEL針對的是機器視覺任務(vision task),因此輸入是一個圖像。值得注意的是,這里的圖像并不是一個存儲于二進制格式的圖像文件,而是一個確確實實的圖像物理信號(即光場信號)。我們會看到的是,整個論文中的芯片都是直接處理物理模擬信號,而不會做任何模擬-數字信號轉換,這里的輸入也因此是一個模擬物理信號。

  輸入圖像光場信號首先進入光學處理部分,即optical analog computing,OAC。OAC的主要任務是把圖像信號進行降維處理。例如,在ImageNet數據集上,圖像輸入是224x224,相當于數據維度高達50000以上,因此首先需要進行降維(和傳統的卷積神經網絡的降采樣層是同一原理和目的)。OAC從物理上是利用光學衍射讓圖像中的不同像素之間互相交互,從而等價地實現一個矩陣相乘的過程,從實現上來說,OAC可以根據矩陣的權重而使用二氧化硅蝕刻出相應的圖形來完成,換句話說OAC的實現是無需任何功耗的,僅僅就是把光透射過一層掩模版就完成了計算。在論文中,作者提到通過OAC可以實現高達98%的降維而不影響計算精度——換句話說OAC可以實現50倍的數據壓縮,因此這個無需功耗的OAC實際上在整體系統中起到了相當重要的作用。

  光信號經過OAC掩模版之后,照射到ACCEL芯片上的光電二極管陣列上(論文中稱為電子模擬計算electronic analog computing,EAC),因此光電二極管陣列中的每一個光電二極管都會根據OAC的輸出產生相應的光電流。此外,這些光電二極管陣列中的每一個光電二極管的正極都通過開關連接到差分信號線的正極或者負極上(該連接可以根據存儲在SRAM中的內容來配置),因此每一個光電二極管都會為差分線的正極或者負極放電。最后差分線的正極和負極經過模擬比較器獲得最終的0或者1的輸出,同時也完成了模擬信號到數字信號的轉換。整個ACCEL芯片使用成熟的180nm工藝實現,可以在約2ns的時間內完成一次計算,而一次計算耗費的能量為4.4nJ。

  微信截圖_20231109093912.png

  如果我們把OAC和EAC的部分結合到一起,事實上ACCEL從數學的角度是實現了一個等效的神經網絡,其中OAC是一個矩陣相乘運算,而EAC則是實現了神經網絡中的非線性激活部分。根據論文中的數據,使用ACCEL可以在分類(MNIST,KMNIST,Fashion-MNIST)等機器視覺任務中實現和傳統數字卷積神經網絡類似的精度,但是使用ACCEL可以在處理速度和處理能效比上實現幾個數量級的提升:這里的原因其實也很簡單,卷積神經網絡使用傳統數字邏輯計算時,最耗費計算時間和能量的矩陣計算在這里直接使用光學計算完成了,而光學計算耗費的時間是0(光速),能量也是0;另一方面,ACCEL中決定任務處理速度的事實上是模擬電路部分,比較器的積分和開關時間決定了總體的任務處理時間。

  值得注意的是,目前的ACCEL芯片是一個小型的芯片(使用了32x32陣列)并且使用了20多年前的180nm工藝,主要用于概念驗證。如果使用更先進的工藝實現更大的陣列,則首先可以支持更大的神經網絡以支持更復雜的任務,其次可以實現更高的處理速度(模擬電路處理速度即使是使用28nm這樣的成熟工藝也會數倍于180nm)。因此,本次報道的ACCEL的性能數字還遠遠沒有達到該技術可能實現的上限。

  對于未來人工智能和芯片的潛在影響

  清華大學的ACCEL可謂是非常優秀的科研工作,其實現的高性能也為未來應用提供了新希望。我們看到,ACCEL可以實現非常高的處理速度和非常好的能效比;同時,該技術的局限性在于(1)由于使用光學計算,因此最適合機器視覺任務,而對于目前最火熱的語言類模型則難以支持;(2)對于算法和算符的支持,主要對于機器視覺任務中經典的卷積神經網絡支持最好,對于Transformer等模型的支持還需要進一步的研究。

  基于該研究的優勢(計算速度和低能耗)和局限(對于算法類型的支持),我們認為,ACCEL以及相關的研究對于未來人工智能最主要的影響可能在于對于一些特定的任務提供極致的性能,而不是取代通用的GPU。這事實上也和目前的領域專用計算(domain-specific computing)來提供更好的性能及能效比的思路一致。具體來說,以下領域有可能成為ACCEL的應用場景:

  首先,是需要超低延遲的應用場景,例如汽車或其他高速行駛的場景。在這樣的場景中,ACCEL搭配超高幀率的攝像頭(例如目前正在興起的DVS攝像頭芯片,峰值幀率可達1000fps以上),ACCEL的超低延遲可以滿足在超高幀率的兩幀之間完成人工智能算法的推理,從而滿足整體系統的需求。

  此外,ACCEL還可望在觸發式人工智能系統中得到應用。這里的觸發式人工智能系統是指人工智能系統有多個模型組成,在大多數時候運行常開(always-on)的部分,而其他更復雜的人工智能模型僅僅在常開的模塊發現有需要的時候才會觸發打開。由于ACCEL的延遲和能效比都非常優秀,因此非常適合在這樣的觸發式人工智能中擔任常開的模組。

  未來如果ACCEL以及相關的研究需要進入更廣泛的應用,還需要研究人員進一步努力以支持更復雜的算法和模型結構,但是我們認為,前景是光明的,讓我們拭目以待。


本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
午夜国产精品影院在线观看| 欧美精品手机在线| 亚洲精品免费一二三区| 亚洲免费一级电影| 一区二区欧美日韩| 日韩午夜av电影| 亚洲精品欧美专区| 亚洲国产成人av在线| 一区二区三区在线视频免费观看 | 亚洲一区二区少妇| 亚洲视频狠狠| 亚洲午夜日本在线观看| 亚洲视频免费看| 一区二区欧美日韩视频| 中日韩男男gay无套| 夜夜嗨网站十八久久| 99精品欧美| 亚洲视频网站在线观看| 一区二区欧美视频| 亚洲一区二区三区四区中文| 亚洲欧美综合国产精品一区| 亚洲图片自拍偷拍| 亚洲欧美日韩天堂| 久久岛国电影| 亚洲国产视频一区| 亚洲精选在线| 亚洲午夜在线视频| 欧美一级黄色录像| 久久久综合免费视频| 久久嫩草精品久久久精品一| 牛牛精品成人免费视频| 欧美精品在线观看| 欧美色综合网| 国产农村妇女毛片精品久久莱园子 | 免费毛片一区二区三区久久久| 另类图片综合电影| 欧美肥婆bbw| 欧美午夜一区二区三区免费大片| 欧美午夜在线一二页| 国产日韩综合| 亚洲成人原创| av成人免费| 欧美一区二区三区视频免费播放| 亚洲高清一区二| 99国产精品久久久久老师 | 亚洲一区日韩| 久久激情网站| 欧美成人一区二区三区在线观看 | 亚洲激情成人| 亚洲午夜精品国产| 久久都是精品| 一区二区不卡在线视频 午夜欧美不卡在| 亚洲一区二区精品视频| 久久精品国产一区二区三| 欧美fxxxxxx另类| 国产精品久久777777毛茸茸| 国产综合激情| 99精品国产热久久91蜜凸| 欧美亚洲尤物久久| 99av国产精品欲麻豆| 久久99伊人| 欧美另类一区| 国产亚洲精品福利| 亚洲免费观看| 久久精品国产清自在天天线| 夜夜嗨一区二区三区| 久久福利毛片| 欧美日韩精品一区二区在线播放 | 免播放器亚洲一区| 国产精品第十页| 影音先锋久久资源网| 亚洲一区二区三区乱码aⅴ| 亚洲国产一区在线| 亚洲女人小视频在线观看| 快播亚洲色图| 国产精品免费在线| 亚洲国产另类久久久精品极度| 亚洲午夜免费视频| 日韩午夜黄色| 久久综合伊人77777蜜臀| 国产精品久久久久高潮| 亚洲国产激情| 久久国产精品72免费观看| 亚洲在线观看免费| 欧美国产一区二区三区激情无套| 国产三级精品三级| 一本久久青青| 亚洲精品视频在线看| 久久激情视频| 国产精品免费视频观看| 99re66热这里只有精品3直播| 久久精品国产亚洲一区二区三区| 亚洲欧美日韩精品久久久| 欧美日韩高清免费| 亚洲国产精品www| 久久精品国产v日韩v亚洲| 午夜精品久久久久久久蜜桃app| 欧美精品播放| 亚洲第一中文字幕| 久久精品人人做人人爽电影蜜月| 午夜国产欧美理论在线播放 | 国产精品伦子伦免费视频| 日韩系列在线| 99re视频这里只有精品| 麻豆成人精品| 伊人蜜桃色噜噜激情综合| 欧美在线视频在线播放完整版免费观看| 亚洲欧美精品| 国产精品草草| 亚洲视频综合在线| 亚洲视频免费在线观看| 欧美日韩国产成人在线91| 亚洲国产欧美久久| 亚洲韩国精品一区| 美国十次了思思久久精品导航| 国产一区二区三区四区hd| 午夜精品久久久久久久久久久久| 亚洲欧美日韩精品久久亚洲区 | 欧美亚洲综合网| 欧美一区国产在线| 国产精品久线观看视频| 亚洲一品av免费观看| 亚洲欧美精品一区| 国产精品嫩草影院av蜜臀| 亚洲天堂av在线免费| 亚洲在线视频一区| 国产精品久久久久久一区二区三区| 日韩亚洲欧美成人一区| 亚洲午夜极品| 国产精品都在这里| 亚洲天堂av电影| 欧美在线不卡| 国产亚洲在线| 久久精品国产精品亚洲| 麻豆成人在线播放| 亚洲黄色性网站| 一个色综合av| 国产精品九九久久久久久久| 亚洲欧美另类中文字幕| 欧美中文字幕在线观看| 国产亚洲欧美日韩一区二区| 亚洲高清一区二| 欧美激情视频一区二区三区免费 | 亚洲欧美久久| 国产视频亚洲精品| 亚洲国产日韩欧美在线动漫| 欧美成年人网| 99精品欧美一区| 欧美一级淫片aaaaaaa视频| 国产一二精品视频| 亚洲激情视频在线| 欧美日韩91| 亚洲影院免费观看| 久久久久久国产精品mv| 伊人春色精品| 一本大道久久a久久精二百| 欧美性视频网站| 欧美在线视频观看免费网站| 欧美成人一区二区在线| 中文精品99久久国产香蕉| 欧美怡红院视频一区二区三区| 黄色国产精品| 国产精品99久久久久久www| 国产精品美女久久久久久久| 久久精品国产一区二区三| 欧美日本亚洲| 先锋影音久久久| 你懂的视频一区二区| 中国女人久久久| 久久人人97超碰国产公开结果| 亚洲区一区二| 欧美一区1区三区3区公司| ●精品国产综合乱码久久久久| 亚洲私拍自拍| 国内精品一区二区三区| 一区二区三区视频观看| 国产视频精品网| 一区二区av在线| 国产一区二区三区免费不卡 | 亚洲欧美精品suv| 亚洲电影在线| 午夜精品一区二区三区电影天堂| 尤物九九久久国产精品的分类| 亚洲一区亚洲| 亚洲高清在线| 欧美一区日韩一区| 亚洲精品中文在线| 久久久国产精彩视频美女艺术照福利| 亚洲精品色婷婷福利天堂| 久久久久久久久伊人| 99ri日韩精品视频| 蜜臀va亚洲va欧美va天堂 | 中文网丁香综合网| 娇妻被交换粗又大又硬视频欧美| 亚洲一区影音先锋| 亚洲电影天堂av| 久久精品国产久精国产爱| 99成人免费视频| 欧美国产日韩一区二区三区| 欧美一区网站|