《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 基于嵌入式Linux的復雜光照人臉實時檢測研究
基于嵌入式Linux的復雜光照人臉實時檢測研究
2016年微型機與應用第12期
黃世震1,2,黃志勇1,2
(1. 福州大學 物理與信息工程學院,福建 福州 350116; 2. 福建省微電子集成電路重點實驗室,福建 福州 350002)
摘要: 為了滿足嵌入式設備在復雜光照條件下的人臉檢測需求,提出了一種基于光照不變特征的人臉檢測方法。該方法先基于Retinex理論提取光照不變分量,再以MBLBP特征進行AdaBoost人臉檢測。結合該方法,實現了一種基于嵌入式Linux的人臉實時檢測系統。實驗與實際使用結果表明,該人臉檢測系統具有較高的人臉檢出率,且滿足實時性要求。
Abstract:
Key words :

  黃世震1,2,黃志勇1,2

 ?。?. 福州大學 物理與信息工程學院,福建 福州 350116; 2. 福建省微電子集成電路重點實驗室,福建 福州 350002)

      摘要:為了滿足嵌入式設備在復雜光照條件下的人臉檢測需求,提出了一種基于光照不變特征的人臉檢測方法。該方法先基于Retinex理論提取光照不變分量,再以MBLBP特征進行AdaBoost人臉檢測。結合該方法,實現了一種基于嵌入式Linux的人臉實時檢測系統。實驗與實際使用結果表明,該人臉檢測系統具有較高的人臉檢出率,且滿足實時性要求。

  關鍵詞:人臉檢測;嵌入式;ARM;Retinex;MBLBP;AdaBoost

0引言

  人臉檢測是人臉識別等臉部分析的基礎,其在圖像檢索、目標定位、視頻監控以及智能人機交互等領域具有廣泛的應用前景。經過多年的發展,人臉檢測技術已經取得了很大的進展。與此同時,嵌入式平臺技術突飛猛進,不僅具備體積小、功耗低等特點,而且其運算能力也得到了很大的提高。除了實時性的要求外,光照變化對人臉檢測的影響舉足輕重。國內外研究者對光照處理方法做了大量的研究,主要可分為光照歸一化、人臉建模、光照不變量三類方法。以直方圖均衡化為代表的光照歸一化方法在一定程度上能夠減弱光照變化的影響,但是在復雜光照情況下效果不是很理想。光錐法和球諧函數法等人臉建模方法效果好,但計算量大,難以滿足嵌入式平臺的實時性要求。本文從光照不變量的角度入手,提出了一種結合Retinex理論和MBLBP算子的AdaBoost人臉檢測算法,并在ARM開發板上實現。

1硬件平臺構建

  本文采用處理器為三星Exynos 4412的ARM開發板作為實現平臺,該開發板具有主頻為1.5 GHz的CortexA9 CPU,Mali400 GPU,1 GB DDR3 RAM。采用USB攝像頭作為視頻采集輸入設備,LCD觸控顯示屏作為圖形界面顯示以及觸控操作設備。整個硬件平臺架構如圖1所示。

 

001.jpg

  在PC上的Ubuntu系統中建立交叉編譯環境,裁剪和編譯Linux內核、制作根文件系統,并將Bootloader、Linux內核、根文件系統、USB攝像頭和LCD觸控顯示屏等驅動移植到ARM板上。配置NFS,通過以太網實現PC與ARM板的通信。使用SecureCRT軟件通過串口對ARM板進行調試操作。

2軟件設計

  本文的程序設計用到了開源計算機視覺庫(Open Source Computer Vision Library, OpenCV),圖形用戶界面設計采用Qt,因此需對OpenCV和QtEmbedded進行交叉編譯并移植到ARM板上。整個軟件系統框圖如圖2所示。

002.jpg

  由攝像頭的圖像傳感器將采集到的圖像傳輸到Exynos 4412,經過圖像灰度化、尺寸歸一化等預處理后,提取光照不變分量,再計算其MBLBP值,通過Adaboost算法進行人臉檢測,若檢測到人臉則在顯示區域進行標記。

  2.1圖像采集

  本文基于V4L2[1]進行視頻圖像采集程序設計,其流程圖如圖3所示。

003.jpg

  2.2關鍵算法分析

  2.2.1光照不變分量的提取

  LAND E H等人[2]在輻照度模型的基礎上提出了Retinex理論。物體的顏色不受非均勻性光照的影響,而是取決于物體對不同波長光線的反射能力。圖像中的固有屬性為其反射分量,圖像中的干擾部分為光照分量,可通過去除光照分量保留反射分量,實現光照不變分量的提取。

  輻照度模型可用如下公式表示:

  I(x,y)=R(x,y)L(x,y)(1)

  式中,I(x,y)為采集到的光照圖像,R(x,y)和L(x,y)分別表示圖像在(x,y)處的反射系數和光照分量。

  輻照度模型中,R(x,y)由物體的固有屬性決定,與光照無關,因此Retinex理論的重點在于如何獲得R(x,y)。

  將灰度化的采集圖像變換到對數域,通過低通濾波器分離出光照分量,最后用上述獲得的對數域圖像減去分離出的光照分量獲得光照不變分量。

  對公式(1)進行對數變換得到公式(2):

  I′(x,y)=R′(x,y)+L′(x,y)(2)

  式中,I′(x,y)=logI(x,y),表示對數域的采集圖像;R′(x,y)=logR(x,y),表示對數域的光照不變分量;L′(x,y)=logL(x,y),表示對數域的光照分量。

  這里選用的低通濾波器為極大值濾波器,以保證提取的光照不變分量能有足夠的LBP紋理特征供后續人臉檢測使用。該濾波器提取圖像上(2n+1)×(2n+1)窗口的灰度值,并且將最大的灰度值替換掉當前窗口中心像素點的灰度值,通過該窗口遍歷整幅圖像求得每個像素點的灰度值。其公式如下:

  3.png

  其中I(x,y)為像素點(x,y)的灰度值,I(i,j)為像素點(i,j)的(2n+1)×(2n+1)鄰域內的灰度值。

  本文提取光照不變分量的算法流程如圖4所示。

004.jpg

  2.2.2人臉檢測

  目前廣泛使用的人臉檢測方法是VIOLA P和JONES M J[34]提出的以Haarlike特征和積分圖方法進行人臉檢測的Haar分類器,該方法是基于FREUND Y和SCHAPIRE R E[5]提出的AdaBoost算法。AdaBoost是一種通過迭代的方法將同一訓練集訓練的不同弱分類器提升形成強分類器的算法。

  OJALA T等人[67]提出的局部二值模式(Local Binary Pattern, LBP)是一種圖像局部紋理特征描述算子。原始的LBP定義為:對于每幅圖像上的像素點在其周圍3×3窗口內提取像素值,將周圍8鄰域的灰度值與窗口中心點的灰度值進行比較,若周圍像素點的灰度值大于中心點,則該像素點標記為1,否則為0。用公式表示為:

  HNYLQ5(XGACY1LPNJS8_I3K.png

  式中:(xc, yc)為窗口中心點坐標;ic為中心點的灰度值;ip為相鄰像素的灰度值。

  如圖5所示,周圍8鄰域內的像素灰度值經比較可生成8位二進制數00111101,轉換成十進制數為61,該值即為中心像素點的LBP值,可用來反映該區域的紋理信息[8]?!?/p>

005.jpg

  Liao Shengcai等人[9]在原始LBP的基礎上提出了MBLBP (Multiscale Block Local Binary Patterns)。與原始LBP進行單一像素間比較不同的是MBLBP采用了子區域塊的平均像素值進行比較,較好地對不同尺度的紋理信息進行描述,且具有更好的魯棒性。

006.jpg

  以9×9 MBLBP為例,如圖6所示,將一幅圖像的每個子區域等分為9塊,計算這9塊的平均灰度值,按照原始LBP的編碼方式將鄰域的平均灰度值與中心子區域的平均灰度值進行比較,得到的編碼即為中心子區域的特征值。

  LBP特征是整數特征,相比Haar特征,其訓練和檢測速度更快。用LBP特征表征人臉時,對光照變化(除局部劇烈變化之外)不敏感。這一點,在實驗中進行了驗證。本文進行的人臉檢測訓練與測試基本流程如圖7所示。

007.jpg

3測試與分析

  為了驗證本文提出的方法的效果,從CMU和MITCBCL數據庫中選取了625個未參加過訓練的人臉樣本(包括不同復雜光照條件下的人臉)作為測試樣本集。測試實驗結果如表1所示。

009.jpg

  通過實驗,可得知本文訓練的人臉分類器中,MBLBP分類器和IIF+MBLBP分類器的檢測速度相比其他兩個速度更快。在不同復雜光照條件下,MBLBP人臉分類器的檢測率比Haarlike人臉分類器有所提高,但提高并不多,查找漏檢的樣本發現MBLBP分類器相比Haarlike分類器能夠多檢測出一些光照變化的樣本,但對于光照變化劇烈的樣本仍然無法有效檢測出。而采用提取光照不變分量的IIF+Haarlike分類器和IIF+MBLBP分類器均能夠有效檢測出這些光照變化劇烈的樣本,且兩者的檢出率相近。綜合檢出率與檢測速度,在ARM設備上采用IIF+MBLBP人臉分類器進行人臉檢測,不僅滿足實時性要求,而且能夠有效應對不同復雜光照條件下的檢測需求。

  圖8為最終在ARM平臺上實現的人臉實時檢測系統,圖9為該系統在復雜光照條件下的人臉檢測效果。

  

008.jpg

4結論

  本文提出了適用于嵌入式設備的復雜光照人臉實時檢測的方法,通過基于Retinex理論提取光照不變分量,再以MBLBP特征訓練AdaBoost分類器,用該分類器進行人臉檢測。實驗驗證,該方法能夠提高復雜光照情況下的人臉檢出率,且具備較快的檢測速度。最后,在ARM CortexA9平臺上實現了攝像頭人臉實時檢測,經測試與實際使用,整個人臉檢測系統效果良好,為后續研究人臉識別以及其他應用奠定了基礎。

參考文獻

  [1] 徐家,陳奇. 基于V4L2的視頻設備驅動開發[J]. 計算機工程與設計,2010,31(16):35693572.

  [2] LAND E H, MCCANN J. Lightness and Retinex theory [J]. Journal of the Optical Society America, 1971, 61(l):111.

 ?。?] JONES V M. Rapid object detection using a boosted cascade of simple features[C]. Conference on Computer Vision And Pattern Recognition, 2001:511518.

  [4] VIOLA P, JONES M J. Robust realtime face detection[J]. International Journal of Computer Vision, 2004,57(2):137154.


此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
在线一区免费观看| 欧美一区久久| 午夜亚洲福利在线老司机| 亚洲美女一区| 亚洲卡通欧美制服中文| 亚洲国产经典视频| 一区二区三区中文在线观看 | 久久久亚洲欧洲日产国码αv | 99xxxx成人网| 亚洲精品在线观看免费| 亚洲激情一区二区| 91久久久久久久久| 亚洲日本成人| 99精品久久| 野花国产精品入口| 一本久久a久久精品亚洲| 一区二区av| 亚洲午夜视频在线| 亚洲欧美日本日韩| 欧美一级在线亚洲天堂| 欧美一区二区播放| 久久国产精品久久久| 久久精品人人做人人综合| 亚洲福利专区| 亚洲欧洲日产国产综合网| 亚洲精品中文字幕女同| 夜久久久久久| 亚洲欧美激情四射在线日 | 欧美暴力喷水在线| 欧美日韩国产精品一区二区亚洲| 欧美日韩国产精品| 国产精品色网| 激情一区二区三区| 亚洲日本中文字幕免费在线不卡| 亚洲免费av片| 亚洲欧美国产一区二区三区| 欧美在线观看网站| 亚洲精品一区在线观看香蕉| 亚洲一区二区三区视频| 欧美在线国产精品| 欧美gay视频激情| 欧美三级韩国三级日本三斤| 国产精品呻吟| 永久免费精品影视网站| 亚洲精品综合在线| 亚洲欧美国产三级| 最新69国产成人精品视频免费| 一区二区福利| 久久精品伊人| 欧美伦理91| 国产日韩精品久久| 在线日韩av永久免费观看| 99精品热视频只有精品10| 欧美一进一出视频| 99re热这里只有精品视频| 亚洲欧美国产不卡| 麻豆精品视频在线| 国产精品久久一区主播| 在线播放中文一区| 一区二区欧美视频| 久久精品国产一区二区三区免费看 | 亚洲在线视频观看| 久久天天躁狠狠躁夜夜av| 欧美日韩三级一区二区| 国产欧美一区二区三区视频| 亚洲国产成人精品久久久国产成人一区| 日韩视频免费看| 欧美在线精品免播放器视频| 艳妇臀荡乳欲伦亚洲一区| 久久国产天堂福利天堂| 欧美精品激情| 国产在线欧美日韩| 一区二区三区高清在线| 亚洲国产成人久久| 亚洲欧美偷拍卡通变态| 欧美成人精品影院| 国产精品免费福利| 亚洲日韩欧美视频| 亚洲电影免费观看高清完整版在线观看| 亚洲一区欧美激情| 欧美韩国日本综合| 国语精品中文字幕| 亚洲综合视频一区| 一级日韩一区在线观看| 美女国产精品| 国产三区精品| 一本色道**综合亚洲精品蜜桃冫 | 欧美日韩国产区| 红桃视频国产一区| 亚洲一二三区精品| 一区二区不卡在线视频 午夜欧美不卡'| 久久久久久久一区二区三区| 国产精品久久久久久久久果冻传媒| 亚洲黄色天堂| 最新日韩精品| 久久久夜精品| 国产日韩在线一区二区三区| 亚洲午夜一区二区| 在线视频你懂得一区| 欧美高清自拍一区| 一色屋精品视频免费看| 午夜精品久久一牛影视| 亚洲专区一区| 欧美日韩亚洲91| 亚洲精品综合| 99热免费精品| 欧美国产欧美亚洲国产日韩mv天天看完整| 国产欧美日韩综合一区在线观看| 一区二区高清视频| 中文在线资源观看网站视频免费不卡| 猛干欧美女孩| 在线不卡中文字幕播放| 久久国产免费| 久久久久女教师免费一区| 国产视频观看一区| 欧美一级二级三级蜜桃| 久久精品国内一区二区三区| 国产精品视频午夜| 亚洲免费视频在线观看| 午夜亚洲性色福利视频| 国产精品男女猛烈高潮激情| 亚洲午夜精品一区二区| 亚洲欧美制服中文字幕| 国产精品乱人伦一区二区| 亚洲在线成人| 久久激情中文| 国产亚洲二区| 久久精品日韩| 免费观看一级特黄欧美大片| 亚洲成人自拍视频| 日韩视频免费观看高清在线视频| 欧美成人亚洲成人| 亚洲人久久久| 亚洲一区二区三区激情| 国产精品家教| 亚洲欧美日韩国产中文| 久久精品伊人| 亚洲第一主播视频| 亚洲最新在线| 国产精品日韩一区二区三区| 销魂美女一区二区三区视频在线| 久久精品久久综合| 一区在线影院| 一本一本a久久| 国产精品久久久久久五月尺| 亚洲欧美伊人| 农夫在线精品视频免费观看| 亚洲人成人一区二区三区| 亚洲一区日本| 国产一区二区三区高清在线观看| 亚洲电影自拍| 欧美日韩精选| 亚洲欧美在线另类| 欧美成人午夜激情在线| 一本大道久久a久久综合婷婷| 午夜久久久久久| 国内精品美女av在线播放| 亚洲人久久久| 欧美私人网站| 欧美怡红院视频| 欧美精品一区二区三区高清aⅴ| 在线视频欧美一区| 久久久久久欧美| 亚洲精品中文字幕女同| 性欧美暴力猛交另类hd| 在线播放不卡| 亚洲一区在线观看视频| 国产精品视频内| 亚洲黄色av| 国产精品久久国产精品99gif| 欧美一区二区三区喷汁尤物| 欧美国产视频在线观看| 亚洲一区二区三区四区五区午夜| 久久婷婷蜜乳一本欲蜜臀| 日韩视频在线观看国产| 久久精彩免费视频| 日韩一级精品视频在线观看| 久久精品国产成人| 亚洲精品日韩在线| 久久精品网址| 9i看片成人免费高清| 久久天堂国产精品| 亚洲婷婷在线| 欧美福利视频网站| 午夜精品久久久久久久99水蜜桃 | 久久久夜夜夜| 亚洲天堂成人| 欧美激情第4页| 午夜精彩国产免费不卡不顿大片| 欧美二区视频| 欧美在线播放| 国产精品jvid在线观看蜜臀| 亚洲国产精品美女| 国产精品伦子伦免费视频| 日韩午夜精品| 精东粉嫩av免费一区二区三区| 亚洲综合色网站| 亚洲精品国产欧美| 久久综合九色综合欧美就去吻| 亚洲视频在线视频|