《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > GSDCPeleeNet:基于PeleeNet的高效輕量化卷積神經網絡
GSDCPeleeNet:基于PeleeNet的高效輕量化卷積神經網絡
2021年電子技術應用第3期
倪偉健,秦會斌
杭州電子科技大學 電子信息學院 新型電子器件與應用研究所,浙江 杭州310018
摘要: 卷積神經網絡在各個領域都發揮著重要的作用,尤其是在計算機視覺領域,但過多的參數數量和計算量限制了它在移動設備上的應用。針對上述問題,結合分組卷積方法和參數共享、密集連接的思想,提出了一種新的卷積算法Group-Shard-Dense-Channle-Wise。利用該卷積算法,在PeleeNet網絡結構的基礎上,改進出一種高效的輕量化卷積神經網絡——GSDCPeleeNet。與其他卷積神經網絡相比,該網絡在具有更少參數的情況下,幾乎不損失識別精度甚至識別精度更高。該網絡選取1×1卷積層中卷積核信道方向上的步長s作為超參數,調整并適當地選取該超參數,可以在網絡參數量更小的情況下,擁有更好的圖像分類效果。
中圖分類號: TN911.73;TP399
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.200844
中文引用格式: 倪偉健,秦會斌. GSDCPeleeNet:基于PeleeNet的高效輕量化卷積神經網絡[J].電子技術應用,2021,47(3):22-26,30.
英文引用格式: Ni Weijian,Qin Huibin. GSDCPeleeNet:efficient lightweight convolutional neural based on PeleeNet[J]. Application of Electronic Technique,2021,47(3):22-26,30.
GSDCPeleeNet:efficient lightweight convolutional neural based on PeleeNet
Ni Weijian,Qin Huibin
Institute of New Electronic Devices and Applications,School of Electronic Information,Hangzhou Dianzi University, Hangzhou 310018,China
Abstract: Convolutional neural network plays an important role in various fields, especially in the field of computer vision, but its application in mobile devices is limited by the excessive number of parameters and computation. In view of the above problems, a new convolution algorithm, Group-Shard-Dense-Channle-Wise, is proposed in combination with the idea of grouping convolution and parameter sharing and dense connection. Based on the PeleeNet network structure, an efficient lightweight convolutional neural network, GSDCPeleeNet, is improved by using the convolution algorithm. Compared with other convolutional neural networks, this network has almost no loss of recognition accuracy or even higher recognition accuracy under the condition of fewer parameters. In this network, the step size s in the channel direction of convolution kernel in the 1×1 convolutional layer is selected as the super parameter. When the number of network parameters is smaller, better image classification effect can be achieved by adjusting and selecting the super parameter appropriately.
Key words : image classification;convolutional neural network;lightweight;dense connectivity;parameter sharing

0 引言

    隨著深度學習理論的提出和硬件設備計算速度的不斷突破,卷積神經網絡在近年來得以迅速發展。2012年,AlexNet[1]在ImageNet大規模視覺識別挑戰賽中獲得了圖像分類冠軍。之后,為了提高網絡模型的準確率,研究人員不斷地加深卷積網絡的深度,相繼提出了性能更加優越的卷積神經網絡,如VGG16[2]、GoogLeNet[3]和DenseNet[4]等。

    這些網絡準確率普遍較高,但是有著非常復雜的模型和很深的層次,參數量十分巨大。在實際生活的應用中,模型往往需要在資源有限的嵌入式設備和移動設備上運行。因此,研究人員開始著手研究,并且相繼提出了更高效的輕量級卷積神經網絡。它們保持了網絡的性能,大大減少了模型的參數量,從而減少計算量,提升了模型速度。

    曠視科技的ShuffleNet在ResNet[5]單元上進行了改進,有兩個創新的地方:逐點分組卷積和通道混洗[6]。WANG R J等提出的PeleeNet是一種輕量級網絡,它在DenseNet基礎上進行了改進和創新,主要有五個方面的結構改進[7]。ZHANG J N等提出了一種卷積核及其壓縮算法,通過這種卷積方法,ZHANG J N等發明了輕量卷積神經網絡SDChannelNets[8]

    可以看出,上述輕量卷積神經網絡均存在一定不足。在使用分組卷積時,為了解決分組卷積導致的信息丟失問題,需要增加額外的操作。在運用1×1卷積時,會導致1×1卷積的參數量在網絡總參數量中占據大部分。通過分析,這些網絡需要通過調整相應的超參數來提高網絡識別精度。這些操作往往會大大增加網絡模型參數量。

    為了解決這個不足,本文結合參數共享密集連接的卷積方法和分組卷積,基于PeleeNet網絡,提出了輕量級卷積神經網絡架構GSDCPeleeNet。適當調節超參數,在損失較小準確度甚至擁有更高準確度的情況下,減小了模型的參數量。  




本文詳細內容請下載:http://m.jysgc.com/resource/share/2000003403




作者信息:

倪偉健,秦會斌

(杭州電子科技大學 電子信息學院 新型電子器件與應用研究所,浙江 杭州310018)

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
午夜精品一区二区在线观看| 欧美a级片一区| 国产精品视频网站| 欧美精品在线免费| 欧美高清免费| 欧美成人精品在线观看| 免费永久网站黄欧美| 久久综合网hezyo| 久久天天综合| 小辣椒精品导航| 欧美一区网站| 久久久久久成人| 久久久久久噜噜噜久久久精品| 久久精品一二三区| 麻豆国产精品777777在线| 美女久久一区| 欧美大片在线看| 欧美日韩a区| 欧美性一二三区| 理论片一区二区在线| 每日更新成人在线视频| 欧美91大片| 欧美日韩国产小视频在线观看| 欧美日韩精品| 国产精品激情电影| 国产精品网站在线| 国产亚洲精品一区二555| 国产一区二区三区久久| 一区精品在线| 亚洲精品国久久99热| 99精品免费网| 午夜精品久久久久久久 | 亚洲日本黄色| 99视频国产精品免费观看| 亚洲先锋成人| 久久国产精品99国产| 亚洲精品孕妇| 亚洲一区二区三区精品在线| 亚洲欧美中文字幕| 久久一区亚洲| 欧美日韩免费在线观看| 国产精品丝袜91| 激情视频一区| 9久re热视频在线精品| 香蕉av福利精品导航| 亚洲国产欧美一区二区三区久久| 日韩一级在线观看| 欧美呦呦网站| 欧美xxx在线观看| 国产精品久久久久久久久搜平片| 国产真实乱偷精品视频免| 亚洲日本中文字幕区| 亚洲欧美国产高清| 亚洲黄网站在线观看| 亚洲影音一区| 久久综合婷婷| 欧美性大战xxxxx久久久| 很黄很黄激情成人| 9色porny自拍视频一区二区| 欧美一区二区三区男人的天堂 | 欧美一区二区高清| 欧美成人有码| 国产精品九九久久久久久久| 国产亚洲精品aa| 亚洲精品久久久久久久久久久| 亚洲在线国产日韩欧美| 亚洲全部视频| 午夜久久tv| 欧美—级a级欧美特级ar全黄| 国产免费观看久久黄| 亚洲国产日韩欧美在线图片| 午夜精品久久久久久久久| 日韩一区二区精品葵司在线| 欧美在线视频在线播放完整版免费观看 | 小黄鸭精品密入口导航| 99综合视频| 久久久精品日韩欧美| 欧美性做爰毛片| 亚洲国产精品欧美一二99| 亚洲欧美综合v| 亚洲性图久久| 欧美成人激情在线| 韩国精品主播一区二区在线观看| 一区二区毛片| 亚洲精品乱码久久久久久日本蜜臀| 欧美一区三区三区高中清蜜桃| 欧美日韩亚洲一区二区三区四区| 永久久久久久| 欧美中文字幕视频| 校园春色国产精品| 欧美日韩一区二区三区在线看 | 亚洲高清自拍| 久久爱www.| 欧美在线视频二区| 国产精品女同互慰在线看| 亚洲伦理网站| 亚洲日本成人| 久久亚洲国产精品一区二区 | 欧美在线影院在线视频| 性刺激综合网| 欧美性猛交xxxx乱大交蜜桃| 亚洲精品女人| 亚洲美女在线观看| 你懂的视频一区二区| 黑人一区二区| 久久成人资源| 久久蜜桃精品| 国内精品久久久久久久影视麻豆 | 欧美亚洲在线视频| 欧美一区二区黄色| 国产精品一区二区女厕厕| 亚洲视频网站在线观看| 亚洲一区二区精品在线| 欧美日韩中文| 亚洲视频欧美视频| 亚洲永久精品国产| 国产精品久久久99| 亚洲一区亚洲| 欧美一区二区免费视频| 国产欧美二区| 欧美一级视频免费在线观看| 久久成人人人人精品欧| 国产午夜精品久久久| 欧美亚洲专区| 老色鬼精品视频在线观看播放| 狠狠色香婷婷久久亚洲精品| 亚洲成在人线av| 免费在线成人| 91久久国产精品91久久性色| 日韩亚洲成人av在线| 欧美日韩三级视频| 一本在线高清不卡dvd| 亚洲欧美成人在线| 国产欧美日韩精品a在线观看| 欧美一区二区三区免费观看| 久久综合九色欧美综合狠狠| 亚洲福利av| 制服丝袜亚洲播放| 国产精品日本一区二区| 性做久久久久久久免费看| 老司机精品久久| 亚洲精品网站在线播放gif| 亚洲一区免费观看| 国产亚洲午夜| 亚洲欧洲一区二区在线观看| 欧美日韩另类在线| 午夜精品美女久久久久av福利| 久久久国产成人精品| 怡红院av一区二区三区| 一本大道av伊人久久综合| 国产精品久久久久免费a∨大胸| 性色av一区二区三区| 免费视频亚洲| 一本色道久久综合狠狠躁篇怎么玩| 亚洲欧洲99久久| 激情丁香综合| 在线视频亚洲一区| 国产欧美一区在线| 亚洲伦理在线免费看| 国产精品欧美经典| 亚洲国产精品久久91精品| 欧美日韩少妇| 欧美在线综合视频| 欧美日韩国产综合视频在线观看中文 | 日韩午夜剧场| 国产精品亚洲片夜色在线| 亚洲国产精品一区二区www在线| 欧美日韩八区| 亚洲欧美一区二区三区久久| 裸体歌舞表演一区二区| 一本色道久久综合亚洲精品不卡| 久久精品成人| 日韩视频在线一区二区| 久久久www成人免费无遮挡大片 | 在线视频中文亚洲| 久久综合福利| 99国产精品视频免费观看| 欧美自拍偷拍| 日韩视频免费在线观看| 久久久国产精品一区二区三区| 亚洲精品在线观| 久久久久久久网站| 在线视频欧美日韩精品| 女仆av观看一区| 亚洲欧美清纯在线制服| 欧美日韩美女在线观看| 亚洲国产精品va在线看黑人 | 久久久久久91香蕉国产| 99亚洲一区二区| 久久一区二区三区av| 亚洲淫片在线视频| 欧美精品18videos性欧美| 欧美在线观看日本一区| 国产精品久久久999| 日韩视频免费观看| 红桃视频国产精品| 久久国内精品自在自线400部| 一区二区高清视频| 欧美精品九九99久久| 亚洲黄色在线看|