《電子技術應用》
您所在的位置:首頁 > 電子元件 > 業界動態 > OPPO自研影像專用NPU背后,成為AI賽道黑馬的野心

OPPO自研影像專用NPU背后,成為AI賽道黑馬的野心

2021-12-20
來源: 智東西

  OPPO突圍AI底層技術,首顆自研影像NPU攪動AI產業。

  如今每個人對于“AI”這個名詞或許都能聊上兩句。各類智能硬件設備不斷深度介入我們的生活中,大到智能汽車、小到一部手機。在智能硬件爆發的背后,AI算法也在快速迭代發展,算法模型越來越復雜,對于硬件的要求也更高,“AI芯片”這個概念也成為了近幾年來AI產業關注的焦點之一。

  其實,能夠用于人工智能應用、實現AI加速的模塊,都可以稱為廣泛意義上的AI芯片。比如我們大多數人手機處理器中的NPU(神經網絡處理器)模塊,就是一種AI芯片。

  就在兩天前,OPPO發布了自家第一個自研芯片,這是一個專門用于影像處理的NPU芯片,名為馬里亞納 X,與世界上最深的海溝“同名”,OPPO要趟自研芯片這最深的水。

forward (23).jpg

  面向AI應用的全新DSA架構、臺積電6nm先進工藝以及40倍的AI能效比提升,馬里亞納 X將手機計算影像推向了“4K+20bit RAW+AI+Ultra HDR”的時代,同時,也首次將AI影像算法與傳感器、SoC進行了垂直整合,完成了影像鏈路的閉環。

  一句話來說,馬里亞納 X作為開發專用AI算法,到算力硬化全鏈路垂直整合能力標準對芯片,彌合了AI算法與硬件之間的鴻溝,成為加速AI算法落地的“橋梁”。

forward (22).jpg

  正如OPPO創始人兼首席執行官陳明永所說,OPPO已經走入了技術研發的“深水區”, 對于OPPO來說,馬里亞納 X的落地證明了OPPO自研芯片的技術與能力,而對于AI產業來說,馬里亞納 X或許為AI在移動領域的加速落地提供了新的思路。

  01.AI能效比暴漲40倍,算法落地視頻成為可能,DSA架構劍指計算影像

  從芯片技術架構來看,常見的AI芯片主要有通用芯片(CPU、GPU)、半定制化芯片(FPGA)、全定制化芯片(ASIC)、類腦芯片以及軟件定義硬件芯片五大類。

  馬里亞納 X這枚NPU主要用于手機影像計算領域,相對來說應用更專一,并且芯片專門為提升OPPO手機的影像體驗而定制對專用AI芯片,其中既有接近ASIC芯片的專用性而帶來的超高效率,同時又具備AISC所沒有的靈活性。

  目前通用手機SoC中都包含了ISP(圖像信號處理)模塊,顧名思義,ISP的主要作用是對圖像傳感器采集到的信息進行處理,它也是一種ASIC芯片,但大都集成于手機SoC中。而ISP與馬里亞納 X最核心的區別就在于ISP并不具備AI性能,在SoC中必須要依靠另外的AI計算單元來配合。例如蘋果A系列芯片的ISP,也需要依賴整個芯片的Neural Engine提供AI的算力支持。

  馬里亞納 X的AI算力達到了18TOPS,已經可以比肩蘋果A15,而在峰值算力強勁的同時,實現較好的能效是OPPO更加看重的,這一點在手機這類移動設備上顯得尤為重要。

forward (21).jpg

  馬里亞納 X能夠做到11.6TOPS/W的能效比,這是移動設備中罕見的兩位數對能效比性能,意味著手機能夠在消耗既定電量都條件下,能夠處理更加大量的數據。

  值得一提的是,該結果是基于真實落地商用的復雜AI算法和隨機生成圖片得來,實際上,如果基于現實世界的人像、風景等真實圖片進行處理,馬里亞納 X的能效比還會更高。與搭載驍龍888的Find X3 Pro進行對比,馬里亞納 X運行OPPO自研AI降噪模型的性能可以達到40FPS,大約是OPPO Find X3的20倍。

  在此基礎上,馬里亞納 X的功耗僅有800毫瓦,僅為OPPO Find X3上驍龍888的一半,因此能效比達到了40倍,這種提升無疑是一種“質變式”的。

forward (20).jpg

  實際上,雖然手機計算攝影發展多年,但大多數AI算法仍然只能針對單張或者多張照片進行處理,比如AI美顏、AI夜景拍照的后處理,本質上依然是以時間換計算,如果要算的更多,那意味著消費者往往需要在拍攝后等待更久的處理。

  但這樣的算法,面對需要實時處理大量視頻拍攝卻很難應用。因為在視頻拍攝中,AI算法運行最低性能門檻也要有30FPS,這意味著芯片需要提供30倍以上的性能,才能讓后處理的算法,能夠實時去運行。

  可以說,馬里亞納 X讓算法在視頻端的應用從不可能變為了可能,這對于AI算法應用效果的提升來說是“從量變到質變”。基于這樣的AI性能及高能效比,馬里亞納 X在手機影像領域實現了諸多突破。

forward (19).jpg

  比如在成像的動態范圍方面,馬里亞納 X最高能夠支持20bit Ultra HDR成像、覆蓋100萬:1的最大亮度范圍,這樣的能力已經媲美“人眼級”,也是目前行業中如驍龍8、天璣9000這類主流移動SoC HDR能力的4倍。

  根據OPPO給出的拍攝樣例對比可以看到,在人像拍攝和靜物拍攝兩類場景中,采用馬里亞納 X方案的機型拍出的視頻,可以明顯提升暗部的細節,同時高光部分也沒有過曝現象。

  在強勁AI性能和對影像體驗的直觀改善背后,馬里亞納 X芯片在架構層面也進行了大膽突破。馬里亞納 X采用了AI時代的DSA架構理念,簡單來說,DSA就是“應用在特定領域的架構”,馬里亞納 X的“特定領域”,顯然就是手機計算影像。

  目前在通用手機SoC中也有用于提升AI算力的模塊,不同的廠商或許叫法不同,但可以廣泛地看作一類通用NPU,這種通用NPU要兼顧很多不同場景中的算法模型。相比之下,馬里亞納 X的DSA架構更加專用,針對OPPO自研的AI模型去硬化對應的算子,這也是OPPO影像專用芯片與傳統NPU的核心區別之一。

  可以看到,OPPO在通過一種“專芯專用”的芯片設計思路,彌合傳統硬件和AI算力鴻溝。而在核心的AI性能領域,馬里亞納 X已經具備足夠能力突破目前手機計算攝影的“天花板”。

  02.AI賦能千行百業之下,OPPO成AI賽道黑馬

  馬里亞納 X的發力點是手機計算影像,而放眼整個AI行業,AI落地的大潮已經在千行百業中快速滲透。“AI芯片將無處不在”的預言正在成為現實。

  從智能手機到智能家居,從數據中心到邊緣設備,我們的生活正在被AI芯片全面入侵。僅僅在智能手機領域,AI技術已經深入移動游戲、視覺識別、音頻交互、通信優化、智能充電等各個角落。

forward (18).jpg

  業內通常將AI產業分為應用層、技術層和基礎層,其實OPPO目前面向萬物互融時代的“3+N+X”戰略,包含了軟件硬件基礎技術、AI技術以及以充電、影像為代表的差異化技術,在AI產業的應用層和技術層,OPPO已有較多儲備。而此次的馬里亞納 X,顯然是OPPO面向AI芯片領域的一次大膽探索和前瞻性布局,AI芯片也是目前AI產業基礎層中愈發重要的一環。

  在AI芯片中的通用CPU、GPU領域,由于GPU擅長重復性高的大規模并行計算任務,因此可以作為AI加速器使用。在這一領域,英偉達因其成熟高效的GPU解決方案,在AI訓練芯片市場中獨領風騷,其各類AI加速器產品在業內被廣泛應用于云端和終端側。

forward (17).jpg

  ▲NVIDIA A100 GPU

  如英偉達、AMD、英特爾這樣的頭部玩家,通過定制化CPU和GPU提供AI加速器解決方案,成為了全球AI領域基礎設施建設的最大獲益者,不過他們的產品鮮有涉及移動端,主要以面向桌面端平臺為主。在移動端,手機AI芯片目前還主要以NPU模塊的形式存在于通用手機SoC中,這也與手機的算力需求以及功耗要求密切相關。

  由于能效比要求更高,并且定制化需求更加“千人千面”,移動端也需要有針對性的AI芯片產品出現。從過去兩年來看,手機AI芯片市場格局基本穩定,由蘋果、華為、高通三大巨頭牢牢把控高端市場,聯發科、展銳等廠商在中端及入門級市場中表現亮眼。

forward (16).jpg

  但實際上,隨著手機功能越來越豐富,以計算影像為代表的應用場景對于算力和功耗的要求越來越苛刻,這些通用手機AI芯片應對某個特定領域的AI需求已經有些捉襟見肘。

  此時OPPO無疑成為了手機AI芯片領域的一位新晉玩家,用三年時間,經過上千人研發團隊的努力,終于將馬里亞納 X這枚影像專用NPU帶到了我們的視野中,并即將于明年落地在旗艦級Find X系列中。

forward (15).jpg

  除了對于AI產業基礎層AI芯片的突破,OPPO也把握住了一次AI產業中的重要趨勢變革,也就是軟硬件的深度結合,將算法寫入硬件中,做“硬件級的算法”,也一直是OPPO致力實現的目標。在終端AI芯片在移動領域的應用側,OPPO在特定領域率先實現了突破。與其說OPPO在做一個影像專用NPU芯片,不如說OPPO在用一種新的思路,實現AI算法在終端側的加速實現。

  03.結語:OPPO亮劍AI芯片產業

  馬里亞納 X以其強勁的AI算力和AI能效比,顯著提升了手機計算影像的體驗,同時也用軟硬件深度結合、專芯專用的思路和方式,準確切入了AI芯片賽道,成為終端AI芯片產業的一位新晉玩家。在AI強勢侵入并顛覆各個傳統領域的同時,AI芯片正在云計算、手機、安防監控、智能家居、自動駕駛等場景上演新的群雄爭霸賽。終端AI芯片戰場格局復雜,新老玩家、跨界玩家交融,各展其華,而OPPO也走出了一條屬于自己芯片之路。

  作者 |  云鵬

  編輯 |  漠影




mmexport1621241704608.jpg


本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
极品日韩久久| 亚洲午夜精品| 国产精品久久9| 欧美日本在线看| 免费视频亚洲| 鲁鲁狠狠狠7777一区二区| 欧美亚洲综合在线| 亚洲综合电影| 亚洲欧美日韩一区| 亚洲影院色无极综合| 亚洲一区二区黄色| 亚洲视频在线观看| 亚洲午夜精品福利| 亚洲视频视频在线| 亚洲视频你懂的| 亚洲一区在线播放| 亚洲欧美日韩电影| 欧美一区二区免费观在线| 午夜精品福利在线| 欧美一级专区免费大片| 欧美一区二区三区四区高清 | 亚洲影院色无极综合| 亚洲永久在线| 欧美一区二区免费| 久久久蜜桃一区二区人| 久久一区亚洲| 欧美激情视频一区二区三区免费 | 在线免费不卡视频| 亚洲国产成人av| 亚洲精品一区二| 在线中文字幕日韩| 性欧美xxxx大乳国产app| 亚洲国产精品久久久久秋霞影院 | 国产精品99久久久久久久久久久久| 一区二区三区国产| 亚洲字幕在线观看| 亚洲第一精品影视| 日韩午夜一区| 亚洲欧美视频一区二区三区| 久久精品国产亚洲高清剧情介绍| 欧美77777| 国产精品国产亚洲精品看不卡15 | 久久成人国产精品| 日韩视频亚洲视频| 午夜精品久久99蜜桃的功能介绍| 久久精品国产77777蜜臀 | 国产三区二区一区久久| 在线观看福利一区| 一个色综合导航| 久久精品国产77777蜜臀| 99国产精品| 久久国产精品黑丝| 欧美精品99| 国产日韩在线一区二区三区| 91久久综合| 午夜性色一区二区三区免费视频| 亚洲精品日日夜夜| 香蕉成人久久| 欧美不卡福利| 国产欧美日韩免费看aⅴ视频| 亚洲国产日韩一区| 亚洲砖区区免费| 日韩一区二区久久| 久久久精品日韩| 欧美视频不卡| 在线观看亚洲精品视频| 在线视频欧美精品| 亚洲日本成人网| 久久精品国产99国产精品澳门| 欧美日本国产| 国内精品久久久久久影视8 | 男人插女人欧美| 国产美女精品视频| 亚洲毛片在线观看| 亚洲国产成人在线| 亚洲欧美激情四射在线日| 免费观看在线综合色| 国产欧美日韩一区二区三区| 亚洲美女黄色| 最新亚洲电影| 久久久av网站| 国产精品久久久久久久久久久久久| 亚洲国产裸拍裸体视频在线观看乱了| 午夜精品久久久| 亚洲午夜av| 欧美激情在线有限公司| 国模吧视频一区| 午夜欧美电影在线观看| 中文av一区特黄| 欧美经典一区二区| 曰本成人黄色| 久久疯狂做爰流白浆xx| 午夜在线精品偷拍| 欧美日韩一区成人| 亚洲国产天堂久久国产91| 亚洲高清三级视频| 久久精品国产成人| 国产精品视频九色porn| 在线亚洲一区| 亚洲午夜激情在线| 欧美日韩国产区| 亚洲人体一区| 亚洲伦伦在线| 欧美激情1区| 91久久久久久国产精品| 亚洲国产专区校园欧美| 久久婷婷综合激情| 国内精品久久国产| 久久国产精品一区二区三区四区| 久久精品二区三区| 国产亚洲视频在线观看| 亚洲女同精品视频| 午夜在线a亚洲v天堂网2018| 国产精品户外野外| 亚洲影院色无极综合| 亚洲欧美日韩国产中文在线| 国产精品国产三级国产| 宅男噜噜噜66一区二区| 亚洲伊人伊色伊影伊综合网| 欧美日韩国产高清视频| 日韩一级黄色片| 亚洲永久字幕| 国产精品美女在线| 亚洲一区三区视频在线观看| 香蕉av福利精品导航| 国产精品综合网站| 欧美一区观看| 久久久久综合一区二区三区| 韩国三级电影久久久久久| 久久精品视频导航| 免费人成网站在线观看欧美高清| 亚洲高清自拍| 一区二区免费在线视频| 国产精品多人| 午夜激情综合网| 久久久久看片| 亚洲国产精品小视频| 一区二区三区国产盗摄| 欧美午夜美女看片| 亚洲欧美另类中文字幕| 亚洲精品一二三区| 欧美日韩国产在线播放网站| 亚洲免费黄色| 性欧美办公室18xxxxhd| 国产亚洲一区二区三区在线观看| 久久精品视频导航| 欧美成人精品影院| 99精品热视频只有精品10| 午夜精彩国产免费不卡不顿大片| 国产欧美在线播放| 久久精品视频免费播放| 欧美激情一级片一区二区| 在线视频精品| 久久久久久精| 亚洲裸体视频| 欧美一区日韩一区| 一区二区在线观看av| av不卡在线观看| 国产欧美一区二区精品性色| 亚洲国产精品成人久久综合一区| 欧美日韩国产一区精品一区| 亚洲免费综合| 嫩草国产精品入口| 一区二区高清视频| 久久久国产视频91| 亚洲精品综合久久中文字幕| 亚洲欧美一区二区原创| 激情视频一区二区三区| 中文在线资源观看视频网站免费不卡| 国产女人精品视频| 亚洲裸体视频| 国产婷婷色一区二区三区在线 | 欧美中文字幕在线观看| 亚洲第一中文字幕| 亚洲免费小视频| 亚洲成人在线观看视频| 亚洲天堂久久| 狠狠入ady亚洲精品经典电影| 99在线精品视频在线观看| 国产日韩欧美成人| 日韩一区二区福利| 国产一级精品aaaaa看| 99国内精品| 国产资源精品在线观看| 亚洲视频一二| 亚洲风情亚aⅴ在线发布| 午夜精品视频在线观看一区二区| 亚洲国产婷婷香蕉久久久久久99| 欧美一区二区福利在线| 亚洲精美视频| 久久人人爽人人爽| 中文在线资源观看网站视频免费不卡 | 99视频在线观看一区三区| 国产日韩视频| 亚洲一区综合| 亚洲国产黄色| 久久不射网站| 99re这里只有精品6| 免费欧美在线| 欧美在线视频一区二区三区|