《電子技術應用》
您所在的位置:首頁 > 可編程邏輯 > 設計應用 > 基于FPGA的多源數據融合目標檢測的研究與實現
基于FPGA的多源數據融合目標檢測的研究與實現
電子技術應用
韓德強,閆釗,楊淇善
北京工業大學 計算機學院
摘要: 隨著智能駕駛、機器人等技術的高速發展,在這些場景下常規的二維檢測算法并不能滿足環境感知的要求,需要三維目標檢測去獲得精準的環境信息。但是,目前大多主流的多源數據融合的三維目標檢測模型都依賴于高算力、高功耗的平臺,難以在性能較低的嵌入式平臺實現。針對這些問題提出了一種在低功耗的FPGA平臺上實現多源融合的三維目標檢測的方法,通過融合激光雷達點云與攝像頭圖像數據,來彌補點云特征信息的不足,以實現更高的準確率和檢測的穩定性。同時結合FPGA平臺的特點,對融合的特征進行篩選及處理,并結合量化策略對模型進行壓縮。經過實驗,融合方式明顯提升小物體的準確度,量化后的模型在三維檢測平均精度損失小于3%的情況下在端側FPGA平臺成功運行。
中圖分類號:TP183 文獻標志碼:A DOI: 10.16157/j.issn.0258-7998.256663
中文引用格式: 韓德強,閆釗,楊淇善. 基于FPGA的多源數據融合目標檢測的研究與實現[J]. 電子技術應用,2025,51(11):17-24.
英文引用格式: Han Deqiang,Yan Zhao,Yang Qishan. Research and implementation of multi-source data fusion target detection based on FPGA[J]. Application of Electronic Technique,2025,51(11):17-24.
Research and implementation of multi-source data fusion target detection based on FPGA
Han Deqiang,Yan Zhao,Yang Qishan
School of Computer Science,Beijing University of Technology
Abstract: With the rapid development of technologies such as intelligent driving and robots, conventional 2D detection algorithms cannot meet the requirements of environmental perception in these scenarios, and 3D target detection is required to obtain accurate environmental information. However, the current mainstream 3D target detection models based on multi-source data fusion rely on high-computing and high-power platforms, and are difficult to implement on low-performance embedded platforms. In response to these problems, a method for implementing multi-source fusion 3D target detection on a low-power FPGA platform is proposed. By fusing the LiDAR point cloud and camera image data, the lack of point cloud feature information is compensated to achieve higher accuracy and detection stability. At the same time, combined with the characteristics of the FPGA platform, the fused features are screened and processed, and the model is compressed in combination with a quantization strategy. After experiments, the fusion method significantly improves the accuracy of small objects, and the quantized model runs successfully on the end-side FPGA platform with an average 3D accuracy loss of less than 3%.
Key words : LiDAR;3D object detection;FPGA;embedded;multi-sensor fusion

引言

隨著人工智能技術的突飛猛進,人工智能相關的應用已經和人們的生活息息相關。機器人以及自動駕駛的相關應用和研究也越來越頻繁地出現在公眾視角之內。然而,隨著應用場景日益復雜,人們需要更加優秀的環境感知算法。環境感知算法不僅直接影響著機器人和自動駕駛運行的性能,更是在復雜環境下作出正確決策的基礎[1]。

感知算法的目的是從環境中獲得物體的位置、類別和運動趨勢等信息。與傳統的二維感知算法相比,三維的環境感知算法能夠更加準確地獲得真實環境的信息,滿足高精度檢測的需求[2]。同時,隨著各類算法的不斷成熟與硬件性能的快速發展,多種傳感器的協同工作已經成為研究者提升感知系統整體性能的一種重要手段[3]?;跀z像頭的目標檢測技術隨著深度學習技術的發展和應用,在多數場景下取得了很理想的檢測效果[4]。然而,基于攝像頭的成像的原理,普通單目攝像頭缺少對三維空間中深度信息的精確感知,使用深度相機或者采用多目相機的方式可以獲得近距離精度較高的深度信息,但結果也會受到運動和距離等因素的影響;毫米波雷達雖然能直接獲取目標的相對速度與距離,但是檢測范圍較小,無法覆蓋遠距離的目標[5]。相比之下,激光雷達可以通過主動掃描獲得高精度的點云數據,不僅能精確捕捉物體表面信息,相較于其他傳感器還具備較強的抗干擾能力和不同環境的適應能力[6]。但是,點云數據存在無序性,不能在空間中均勻地分布[7],處理難度較高。同時由于激光雷達技術起步較晚,相關算法尚未完全成熟,其在目標分類等關鍵環節仍存在不足之處。

鑒于此,采用多源信息融合的策略,將激光雷達與攝像頭的數據有機結合,通過圖像檢測來補充點云數據中難以捕捉的細節信息,實現信息的互補,是當前三維目標檢測最重要的研究方向[8]。


本文詳細內容請下載:

http://m.jysgc.com/resource/share/2000006835


作者信息:

韓德強,閆釗,楊淇善

(北京工業大學 計算機學院,北京 100124)


subscribe.jpg

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
香蕉久久夜色精品| 精品91在线| 国产精品久久久久久久久久直播| 久久乐国产精品| 亚洲一区在线免费观看| 亚洲欧美伊人| 亚洲一二三区在线观看| 一区二区三区免费在线观看| 亚洲精品自在久久| 亚洲精品乱码久久久久久蜜桃91 | 亚洲一区日韩| 一本久久综合| 一本一本a久久| 日韩亚洲一区在线播放| 亚洲另类自拍| 亚洲美女av在线播放| 亚洲美女黄网| av成人免费| 亚洲天堂av在线免费观看| 亚洲网站视频福利| 亚洲你懂的在线视频| 亚洲永久免费视频| 亚洲欧美三级在线| 久久国产精品久久久久久| 久久久久久自在自线| 久久婷婷成人综合色| 久久天天躁狠狠躁夜夜av| 麻豆成人在线播放| 欧美激情亚洲| 欧美国产日韩视频| 欧美午夜电影一区| 国产精品乱码一区二三区小蝌蚪| 国产精品视频大全| 国产精品伊人日日| 国产亚洲精品自拍| 亚洲第一在线综合网站| 亚洲精品你懂的| 一区二区成人精品| 亚洲欧美一级二级三级| 久久精品国产一区二区三区| 亚洲人成77777在线观看网| 99国产一区二区三精品乱码| 欧美亚洲在线观看| 亚洲国产日韩欧美| aa亚洲婷婷| 亚洲资源在线观看| 欧美一区二区三区男人的天堂 | 午夜欧美不卡精品aaaaa| 欧美一区二区三区免费看| 亚洲午夜羞羞片| 欧美一区二区精美| 亚洲美女黄网| 亚洲欧美中文日韩在线| 久久精品人人爽| 欧美国产日韩免费| 国产精品亚发布| 精品粉嫩aⅴ一区二区三区四区| 亚洲国产日韩精品| 中文一区字幕| 亚洲国产精品va在线看黑人动漫| 亚洲精品在线视频| 午夜亚洲一区| 免费久久99精品国产自| 国产精品久久久免费| 狠狠色2019综合网| 日韩视频在线观看免费| 欧美有码在线视频| 亚洲图片欧美午夜| 久久综合九色综合网站 | 国产精品久久久久久久浪潮网站| 国产一区二区精品在线观看| 日韩视频永久免费观看| 久久激情综合网| 亚洲一区二区三区欧美| 久久久一区二区三区| 欧美日韩影院| 在线观看av不卡| 亚洲午夜精品久久久久久app| 亚洲国产精品www| 亚洲欧美日韩综合| 欧美国产三级| 黄色日韩网站视频| 亚洲视频第一页| 日韩亚洲精品在线| 理论片一区二区在线| 国产精品午夜av在线| 亚洲免费久久| 亚洲国产精品一区二区久| 欧美一区二区三区久久精品| 欧美人与性动交cc0o| 激情综合自拍| 午夜国产不卡在线观看视频| 在线综合亚洲欧美在线视频| 免费影视亚洲| 韩国在线视频一区| 亚洲欧美999| 亚洲一区二区免费看| 欧美极品影院| 亚洲成人直播| 久久精品二区三区| 久久av一区| 国产精品女人毛片| 日韩亚洲欧美一区二区三区| 91久久精品国产91性色| 久久久精品国产免大香伊| 国产精品亚洲产品| 亚洲午夜电影| 亚洲一二三四区| 欧美日本一区| 亚洲精品一区久久久久久| 亚洲区第一页| 女人香蕉久久**毛片精品| 精品不卡视频| 久久精品亚洲一区二区| 久久久水蜜桃av免费网站| 国产亚洲一区二区精品| 香蕉久久a毛片| 欧美亚洲一区三区| 国产精品一区二区视频| 亚洲影视中文字幕| 亚洲综合色网站| 国产精品欧美风情| 亚洲午夜一区二区三区| 午夜精品久久久久久99热| 国产精品久久久久毛片大屁完整版| 一区二区三区日韩| 亚洲一区制服诱惑| 国产精品日日做人人爱| 亚洲综合日本| 欧美一区二区精品| 国产欧美日韩一区二区三区在线观看| 亚洲制服少妇| 欧美一区午夜精品| 国产自产v一区二区三区c| 亚洲第一网站免费视频| 欧美va亚洲va香蕉在线| 亚洲激情av在线| 日韩一级二级三级| 欧美午夜电影完整版| 亚洲午夜高清视频| 欧美一区二区精品在线| 国内成人精品一区| 亚洲国产日韩欧美在线图片| 欧美激情综合网| 一区二区三区成人| 性色av一区二区三区在线观看| 国产欧美一区二区精品婷婷| 久久经典综合| 欧美黑人在线观看| 日韩一级在线| 销魂美女一区二区三区视频在线| 国产精品日韩欧美一区二区三区| 欧美一区二区视频97| 欧美r片在线| 在线一区视频| 久久国产一二区| 亚洲国产精品小视频| 在线视频你懂得一区| 国产精品爽爽爽| 久久激情五月丁香伊人| 欧美日韩国产丝袜另类| 亚洲一区二区三区乱码aⅴ蜜桃女| 欧美在线影院| 亚洲国产裸拍裸体视频在线观看乱了中文 | 一本综合精品| 国产欧美在线| 亚洲黄色有码视频| 欧美午夜精品久久久久久人妖| 欧美一级网站| 欧美精品亚洲一区二区在线播放| 亚洲图片在区色| 麻豆久久久9性大片| 一本色道久久综合狠狠躁篇怎么玩 | av72成人在线| 久久精品国产一区二区电影 | 欧美一区二区三区精品电影| 欧美激情亚洲激情| 亚洲欧美日韩精品久久久| 麻豆精品在线视频| 亚洲一区二区动漫| 欧美成人黄色小视频| 亚洲影院在线观看| 欧美成人午夜免费视在线看片| 亚洲一区二区三区激情| 欧美大片在线影院| 亚洲欧美日韩精品一区二区 | 国产视频观看一区| 一区二区欧美亚洲| 黄色精品在线看| 亚洲欧美在线高清| 亚洲国产片色| 久久久久高清| 亚洲性视频h| 欧美护士18xxxxhd| 久久国产精品99国产精| 国产精品乱码人人做人人爱| 日韩系列在线| 黄色日韩网站视频| 欧美伊久线香蕉线新在线| 99国产精品国产精品久久|