《電子技術應用》
您所在的位置:首頁 > 可編程邏輯 > 設計應用 > 基于FPGA的多源數據融合目標檢測的研究與實現
基于FPGA的多源數據融合目標檢測的研究與實現
電子技術應用
韓德強,閆釗,楊淇善
北京工業大學 計算機學院
摘要: 隨著智能駕駛、機器人等技術的高速發展,在這些場景下常規的二維檢測算法并不能滿足環境感知的要求,需要三維目標檢測去獲得精準的環境信息。但是,目前大多主流的多源數據融合的三維目標檢測模型都依賴于高算力、高功耗的平臺,難以在性能較低的嵌入式平臺實現。針對這些問題提出了一種在低功耗的FPGA平臺上實現多源融合的三維目標檢測的方法,通過融合激光雷達點云與攝像頭圖像數據,來彌補點云特征信息的不足,以實現更高的準確率和檢測的穩定性。同時結合FPGA平臺的特點,對融合的特征進行篩選及處理,并結合量化策略對模型進行壓縮。經過實驗,融合方式明顯提升小物體的準確度,量化后的模型在三維檢測平均精度損失小于3%的情況下在端側FPGA平臺成功運行。
中圖分類號:TP183 文獻標志碼:A DOI: 10.16157/j.issn.0258-7998.256663
中文引用格式: 韓德強,閆釗,楊淇善. 基于FPGA的多源數據融合目標檢測的研究與實現[J]. 電子技術應用,2025,51(11):17-24.
英文引用格式: Han Deqiang,Yan Zhao,Yang Qishan. Research and implementation of multi-source data fusion target detection based on FPGA[J]. Application of Electronic Technique,2025,51(11):17-24.
Research and implementation of multi-source data fusion target detection based on FPGA
Han Deqiang,Yan Zhao,Yang Qishan
School of Computer Science,Beijing University of Technology
Abstract: With the rapid development of technologies such as intelligent driving and robots, conventional 2D detection algorithms cannot meet the requirements of environmental perception in these scenarios, and 3D target detection is required to obtain accurate environmental information. However, the current mainstream 3D target detection models based on multi-source data fusion rely on high-computing and high-power platforms, and are difficult to implement on low-performance embedded platforms. In response to these problems, a method for implementing multi-source fusion 3D target detection on a low-power FPGA platform is proposed. By fusing the LiDAR point cloud and camera image data, the lack of point cloud feature information is compensated to achieve higher accuracy and detection stability. At the same time, combined with the characteristics of the FPGA platform, the fused features are screened and processed, and the model is compressed in combination with a quantization strategy. After experiments, the fusion method significantly improves the accuracy of small objects, and the quantized model runs successfully on the end-side FPGA platform with an average 3D accuracy loss of less than 3%.
Key words : LiDAR;3D object detection;FPGA;embedded;multi-sensor fusion

引言

隨著人工智能技術的突飛猛進,人工智能相關的應用已經和人們的生活息息相關。機器人以及自動駕駛的相關應用和研究也越來越頻繁地出現在公眾視角之內。然而,隨著應用場景日益復雜,人們需要更加優秀的環境感知算法。環境感知算法不僅直接影響著機器人和自動駕駛運行的性能,更是在復雜環境下作出正確決策的基礎[1]。

感知算法的目的是從環境中獲得物體的位置、類別和運動趨勢等信息。與傳統的二維感知算法相比,三維的環境感知算法能夠更加準確地獲得真實環境的信息,滿足高精度檢測的需求[2]。同時,隨著各類算法的不斷成熟與硬件性能的快速發展,多種傳感器的協同工作已經成為研究者提升感知系統整體性能的一種重要手段[3]?;跀z像頭的目標檢測技術隨著深度學習技術的發展和應用,在多數場景下取得了很理想的檢測效果[4]。然而,基于攝像頭的成像的原理,普通單目攝像頭缺少對三維空間中深度信息的精確感知,使用深度相機或者采用多目相機的方式可以獲得近距離精度較高的深度信息,但結果也會受到運動和距離等因素的影響;毫米波雷達雖然能直接獲取目標的相對速度與距離,但是檢測范圍較小,無法覆蓋遠距離的目標[5]。相比之下,激光雷達可以通過主動掃描獲得高精度的點云數據,不僅能精確捕捉物體表面信息,相較于其他傳感器還具備較強的抗干擾能力和不同環境的適應能力[6]。但是,點云數據存在無序性,不能在空間中均勻地分布[7],處理難度較高。同時由于激光雷達技術起步較晚,相關算法尚未完全成熟,其在目標分類等關鍵環節仍存在不足之處。

鑒于此,采用多源信息融合的策略,將激光雷達與攝像頭的數據有機結合,通過圖像檢測來補充點云數據中難以捕捉的細節信息,實現信息的互補,是當前三維目標檢測最重要的研究方向[8]。


本文詳細內容請下載:

http://www.jysgc.com/resource/share/2000006835


作者信息:

韓德強,閆釗,楊淇善

(北京工業大學 計算機學院,北京 100124)


subscribe.jpg

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
国产精品任我爽爆在线播放 | 国产在线观看精品一区二区三区| 欧美日韩亚洲网| 欧美成人精品高清在线播放| 麻豆国产精品777777在线| 久久久国产91| 久久国产乱子精品免费女 | 欧美日韩国产免费| 一本色道久久综合亚洲91| 欧美激情第9页| 另类专区欧美制服同性| 久久亚洲精品视频| 久久只有精品| 蜜乳av另类精品一区二区| 美国十次了思思久久精品导航| 久久久国产成人精品| 久久一区二区三区av| 狼人社综合社区| 欧美电影免费网站| 欧美区在线播放| 欧美视频在线免费看| 国产精品久久91| 国产乱码精品一区二区三区五月婷 | 日韩亚洲视频在线| 一本色道久久综合一区| 一区二区三区欧美激情| 亚洲综合清纯丝袜自拍| 亚洲一区二区精品视频| 亚洲女人小视频在线观看| 香蕉久久夜色| 亚洲国产欧美不卡在线观看| 最新亚洲激情| 亚洲一级电影| 欧美一区二区啪啪| 久久综合五月天婷婷伊人| 欧美国产日韩二区| 欧美揉bbbbb揉bbbbb| 国产精品欧美一区二区三区奶水| 国产亚洲va综合人人澡精品| 在线免费观看日本一区| 亚洲美女精品成人在线视频| 亚洲一区bb| 久久精品三级| 中日韩美女免费视频网址在线观看 | 在线播放一区| 亚洲看片免费| 国产精品入口尤物| 欧美国产激情| 国产精品久久久久久久久久久久久 | 日韩午夜激情av| 午夜精品www| 最近中文字幕日韩精品| 亚洲午夜在线观看| 久久久久久久国产| 欧美极品在线观看| 国产精品资源| 亚洲国产日韩欧美在线动漫| 亚洲天堂免费在线观看视频| 亚洲成人直播| 亚洲午夜一区二区| 久久婷婷综合激情| 欧美午夜美女看片| 尤物yw午夜国产精品视频| 一区二区三区精品视频| 欧美在线国产精品| 亚洲视频高清| 麻豆成人在线播放| 国产精品视频福利| 最近中文字幕mv在线一区二区三区四区| 亚洲午夜在线| 日韩视频在线一区二区三区| 模特精品在线| 午夜精品福利一区二区三区av| 亚洲成色www8888| 亚洲一区二区三区欧美| 久久深夜福利| 国产精品视频精品| 亚洲日本免费| 亚洲第一黄色| 亚洲欧美日韩久久精品| 欧美福利电影在线观看| 国产欧美精品va在线观看| 亚洲精品一区二区三区蜜桃久| 亚洲欧美资源在线| 国产精品99久久久久久久久久久久 | 欧美日韩小视频| 在线播放亚洲一区| 性欧美videos另类喷潮| 亚洲视频免费观看| 欧美高清日韩| 国产又爽又黄的激情精品视频| 亚洲视频碰碰| 一区二区三区高清不卡| 老司机免费视频一区二区| 国产欧美视频一区二区三区| 国产精品v亚洲精品v日韩精品| 国产精品video| 亚洲国产精品高清久久久| 欧美影院在线播放| 午夜久久久久| 欧美午夜一区二区| 亚洲免费大片| 亚洲精品中文字幕有码专区| 久久综合狠狠| 国模私拍一区二区三区| 亚洲免费婷婷| 亚洲欧美日韩系列| 欧美揉bbbbb揉bbbbb| 99国产麻豆精品| 99国产精品99久久久久久粉嫩| 美女日韩欧美| 黄色av成人| 亚洲成色www8888| 久久免费一区| 国外成人免费视频| 久久精品人人做人人综合| 久久久久久久久久久久久久一区| 国产日韩1区| 午夜精品一区二区三区在线视 | 亚洲精选在线| 欧美成人综合一区| 在线视频国产日韩| 亚洲黄色免费网站| 欧美xx视频| 91久久国产综合久久| 99国产精品视频免费观看一公开| 欧美黄污视频| 亚洲日本va午夜在线影院| 99re6热只有精品免费观看 | 国产精品欧美在线| 午夜精品久久久久久久久久久久 | 久久久国产精品亚洲一区| 国产深夜精品福利| 欧美在线观看视频在线| 久久综合狠狠综合久久激情| 一色屋精品视频在线看| 亚洲精品在线一区二区| 欧美日韩三区四区| 亚洲校园激情| 久久精品91| 在线观看国产精品网站| 99这里有精品| 国产精品久久久久久久久动漫| 亚洲欧美中文字幕| 久久久免费精品| 亚洲国内自拍| 亚洲一二三级电影| 国产欧美日韩一区二区三区在线| 久久国产精品毛片| 欧美亚洲系列| 久久人人精品| 91久久亚洲| 亚洲欧美电影在线观看| 国产亚洲a∨片在线观看| 亚洲国产另类精品专区| 欧美日韩成人一区二区三区| 亚洲视频免费在线| 久久久久久69| 亚洲日本激情| 欧美一区二区三区日韩| 狠狠色丁香婷婷综合| 99re热这里只有精品免费视频| 亚洲国产精品久久久久久女王| 激情伊人五月天久久综合| 亚洲男女自偷自拍| 久久综合色一综合色88| 亚洲伦伦在线| 久久国产精品久久久久久电车| 在线观看成人av电影| 亚洲视频你懂的| 韩国av一区二区三区| 一本久久综合亚洲鲁鲁| 国产精品一区二区视频 | 91久久精品国产91久久性色tv| 欧美色图五月天| 久久成人精品一区二区三区| 欧美精品videossex性护士| 亚洲欧美日韩精品综合在线观看| 麻豆久久婷婷| 亚洲欧美日韩国产一区二区| 欧美国产91| 校园春色国产精品| 欧美日韩国产专区| 欧美综合二区| 国产精品第2页| 亚洲精品国偷自产在线99热| 国产精品一区二区在线| 99国产精品久久久久久久久久 | 在线视频欧美日韩精品| 国产亚洲欧洲997久久综合| 在线视频免费在线观看一区二区| 国产在线拍偷自揄拍精品| 亚洲午夜视频在线观看| 亚洲高清影视| 久久精品视频在线| 亚洲一区二区三区精品在线 | 亚洲第一区中文99精品| 久久国产精品亚洲va麻豆| 一本大道久久a久久精品综合| 开元免费观看欧美电视剧网站|