《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 可編程邏輯 > 業(yè)界動態(tài) > 基于仿生學(xué)和SoPC的嵌入式聲源定位器

基于仿生學(xué)和SoPC的嵌入式聲源定位器

2008-05-06
作者:梁志毅,高金山,董文杰

  摘 要: 論述了基于人體仿生學(xué)和嵌入式軟核的可編程片上系統(tǒng)SoPC的研究與實現(xiàn)。
  關(guān)鍵詞: 仿生學(xué) SoPC 數(shù)字信號并行處理 嵌入式聲源定位" title="聲源定位">聲源定位器


  眾所周知,人的聽覺系統(tǒng)可以對所聽到的特定聲音來源進(jìn)行定位。所謂的“雞尾酒會效應(yīng)”[1]就是指人耳可以在一定的噪音背景下惟一地關(guān)注一個指定的聲音。結(jié)合嵌入式系統(tǒng)小巧靈活的特點(diǎn)和日益強(qiáng)大的功能,實現(xiàn)這樣的一種仿生聲源定位器" title="定位器">定位器,可以有效地對聽障人士的日常生活起到幫助作用,例如躲避突發(fā)的危險狀況、日常的人際交往等。更廣泛地看,這種系統(tǒng)可應(yīng)用于機(jī)器人的聽覺系統(tǒng)、保安保密設(shè)施等諸多領(lǐng)域。
  為與基于ASIC技術(shù)的聲源定位器[2]區(qū)別,本文基于SoPC技術(shù),在Altera的stratix系統(tǒng)平臺上,充分利用SoPC靈活的可重用設(shè)計特性和FPGA的信號并行處理能力,用一個MIC陣列,模擬人耳的聽覺系統(tǒng),實現(xiàn)聲源定位器。并利用其良好的擴(kuò)展性,進(jìn)一步將系統(tǒng)從單CPU架構(gòu)擴(kuò)展至雙CPU架構(gòu),加入了語音識別" title="語音識別">語音識別的功能(本文只重點(diǎn)論述聲源定位的研究與實現(xiàn))。
  在一個相對安靜的房間里對定位器進(jìn)行測試,在5米的直徑范圍內(nèi),可以較準(zhǔn)確地通過LCD輸出聲源的位置坐標(biāo)。同時,對于簡單的短語,經(jīng)過訓(xùn)練之后,系統(tǒng)能夠在不超過1秒的時間內(nèi)產(chǎn)生指定的響應(yīng),如在LCD上顯示相應(yīng)的文字、振動器振動報警等。
1 人耳聽覺模型的基本原理
  在一個簡單的人耳聽覺系統(tǒng)模型中,聲源定位可以描述為:(1)從各種不同頻率的聲音中解析發(fā)現(xiàn)特定的聲音,如從一定的環(huán)境噪聲背景中找到特定聲源所發(fā)出的聲音。(2)獲得聲音到達(dá)MIC陣列的端點(diǎn),即端點(diǎn)檢測" title="端點(diǎn)檢測">端點(diǎn)檢測。(3)聽覺系統(tǒng)根據(jù)聲音到達(dá)兩耳的時間差,判斷出聲源的方向和位置。
  根據(jù)上述人耳聽覺的機(jī)理,所設(shè)計的聲源定位器需要解決聲音的噪音過濾、端點(diǎn)檢測及方位距離算法等問題。
  (1)聲音的噪音過濾和端點(diǎn)檢測。對于噪音的簡單過濾和聲音的端點(diǎn)檢測,可以通過常用的“雙門限法”實現(xiàn)。
  本文利用Matlab下的Simulink作為原理驗證工具。驗證無誤后,將對應(yīng)的FIR數(shù)字濾波器的階數(shù)和系數(shù)直接填入到Quartus II提供的FIR IP Core模塊中參數(shù)化,再在VHDL用戶模塊例化,即可完成FPGA中的語音信號預(yù)處理模塊的搭建工作。
  (2)聲源定位算法。系統(tǒng)中共使用了3個MIC,分別位于水平面上邊長為20cm的等邊三角形的三個頂點(diǎn)。借助于端點(diǎn)檢測,可獲取聲音到達(dá)各個MIC時對應(yīng)的不同計數(shù)值n(對應(yīng)有t=n/f,其中t為聲音傳播時間,f為采樣頻率),從而得到時延估計。經(jīng)過前端的信號預(yù)處理工作,再充分利用聲源傳播中的先驗信息,基于空間幾何知識建立的算法模型,定位精度基本上達(dá)到了應(yīng)用要求。MIC陣列擺放如圖1所示。


  因為該設(shè)備主要是針對聾啞人的語音輔助開發(fā)的,所以通常情況下聲源是與MIC陣列確定的平面共面或近似共面的。在近似共面的情形時,將數(shù)學(xué)模型擴(kuò)展到三維的情況,即MIC陣列確定一個平面,而聲源不在該平面內(nèi)。此時,以原點(diǎn)為中心,假設(shè)聲源位于一個橫截面直徑為3~10m的環(huán)狀空間中,且聲源到MIC陣列平面(橫截面)的垂直距離不超過±1m。可驗證,聲源到原點(diǎn)的距離與聲源在MIC陣列平面投影點(diǎn)到原點(diǎn)的距離,二者偏差僅在4%左右。所以,為便于計算和構(gòu)建模型,可以假設(shè)聲源與MIC陣列共面。
2 系統(tǒng)架構(gòu)
  系統(tǒng)基本架構(gòu)由Avalon Bus和兩個NIOS II CPU組成。NIOS II是基于哈佛結(jié)構(gòu)的RISC通用嵌入式處理器軟核,能與用戶邏輯相結(jié)合。該處理器具有32位指令集、32位數(shù)據(jù)通道和可配置的指令及數(shù)據(jù)緩沖。本文選用標(biāo)準(zhǔn)型內(nèi)核搭建系統(tǒng)。
  利用外圍ADC電路并通過IIS總線,三路" title="三路">三路MIC并行地將各自采集到的語音信號傳入AD Receiver模塊。該模塊是利用VHDL構(gòu)建的用戶外設(shè),用以橋接Avalon總線和ADC,同時完成三路語音信號的并行預(yù)處理。
  單路信號處理過程如下所述:
  將ADC傳入的串行信號轉(zhuǎn)換成16位的并行信號送入FIFO1。每一個并行信號即一個采樣點(diǎn),定義每2 400個點(diǎn)為一幀,選取FIFO1容量為16bit×2560=5KB。存儲點(diǎn)數(shù)達(dá)到一幀后,將該幀逐點(diǎn)送入短時能量分析模塊、短時過零率分析模塊和FIFO2,計數(shù)器同時計數(shù)。FIFO2的容量與FIFO1相同。如果該幀沒有達(dá)到短時能量和過零率的閾值觸發(fā)要求,則該幀為無效幀;如果只達(dá)到過零率的觸發(fā)要求,則該幀為有效幀,暫時保留在FIFO2中,其后一幀若短時能量閾值觸發(fā)則回溯前一幀定位端點(diǎn),否則兩幀都舍棄;如果某幀同時達(dá)到短時能量和過零率的觸發(fā)要求,則聲音起始端點(diǎn)即為該幀內(nèi)部觸發(fā)過零率閾值的那一點(diǎn)。在這里,設(shè)置短時能量的觸發(fā)閾值EH為0.01,約為平穩(wěn)狀態(tài)時能量值的5倍;短時過零率公式中修正閾值T為0.01,當(dāng)短時過零率幅值發(fā)生大于3倍的突變時,則認(rèn)為過零率閾值觸發(fā)。另外,為便于能量閾值觸發(fā)后的回溯查尋,設(shè)置了同樣為5KB的FIFO3、FIFO4,分別存儲短時過零率和短時能量的數(shù)據(jù)。
  將取得的聲音端點(diǎn)值傳至CPU1進(jìn)行定位計算。CPU1利用Avalon總線與CPU2及系統(tǒng)其他模塊進(jìn)行信息交換和處理。
  系統(tǒng)硬件結(jié)構(gòu)如圖2、圖3所示。

?


  NIOS II提供了良好的系統(tǒng)擴(kuò)展性和可編輯性,當(dāng)系統(tǒng)引入語音識別功能使性能要求提高時,在不改變原有系統(tǒng)架構(gòu)的基礎(chǔ)上,通過增加共享內(nèi)存互斥鎖和共享內(nèi)存,系統(tǒng)即可方便快速地擴(kuò)展成為雙CPU架構(gòu)。其中定義CPU1對前段采集的數(shù)據(jù)進(jìn)行定位處理,將處理過的數(shù)據(jù)傳入CPU2,由CPU2完成識別及LCD顯示的功能,如圖3所示。
3 實驗
  在一個相對安靜的房間中對系統(tǒng)進(jìn)行了測試。房間大小約為(8×6×3)m3,環(huán)境噪聲以持續(xù)的音樂模擬,約為40~50dB,待檢測聲音約為65~70dB。人發(fā)聲的位置在圖1所示的平面坐標(biāo)系中選擇。
  圖4顯示了實驗中某個MIC的聲音預(yù)處理波形。聲音信號從左往右依次是你好、危險、早上好三句話,其中利用了223階的FIR線性濾波器實現(xiàn)信號處理功能,其窗函數(shù)為矩形窗。


  從圖4中可以明顯看出:因為背景音樂和說話前后的呼吸,原始聲音波形中出現(xiàn)明顯的干擾信號(背景噪音),但經(jīng)過短時能量分析后,短時能量分析圖中的干擾部分已經(jīng)被過濾掉。實驗證明,將短時能量分析與短時過零率結(jié)合,可以較好地檢測到聲音的端點(diǎn)。
  利用FPGA可并行處理的特性,實時監(jiān)控三路MIC的聲音處理信號,比較各路聲音端點(diǎn)對應(yīng)的不同n值,得出三個時間差,代入定位計算公式,從而定位聲源位置。
  本文論述了基于人體仿生學(xué)和NIOS II的聲源定位器。系統(tǒng)分為語音信號采集預(yù)處理和定位計算兩個基本部分及語音識別一個擴(kuò)展部分。整個系統(tǒng)在實現(xiàn)過程中:
  (1)利用FPGA的并行特性實現(xiàn)了三路語音信號的并行采集和處理;
  (2)利用嵌入式的軟核NIOS II搭建了雙CPU結(jié)構(gòu)。其中CPU1實現(xiàn)了對聲源定位的算法,CPU2實現(xiàn)了對語音識別及響應(yīng)的功能;
  (3)利用NIOS II提供的硬件互斥鎖機(jī)制實現(xiàn)了CPU間的良好同步通信。
  從該系統(tǒng)的研究與實現(xiàn)中可以看到,SoPC的多核結(jié)構(gòu)在低功耗、小面積、低成本的前提下提供了實現(xiàn)強(qiáng)大功能的可能。在聲源定位、語音識別的基礎(chǔ)上,結(jié)合語音合成技術(shù),可為聾啞人提供更完善的幫助。而較高的性價比也將使這樣的系統(tǒng)進(jìn)入更多更廣泛的生活工作應(yīng)用領(lǐng)域。
參考文獻(xiàn)
1 Jie Huang,Ohnishi N,Sugie N.A Biomimetic System for Localization and Separation of Multi-ple Sound Sources.Instrumentation and Measure-ment.IEEE Transactions,1995;44(3)
2 Stanacevic M,Cauwenberghs G.Micorpower Gra-dient Flow Acoustic Localizer.Circuits and Sys-tems I:Regular Papers,IEEE Transactions on[seealso Circuits and Systems I:Fundamental Theory and Applications.IEEE Transactions,2005;52(10)
3 胡 航.語音信號處理.哈爾濱:哈爾濱工業(yè)大學(xué)出版社,2002
4 王炳錫,屈 丹,彭 煊.實用語音識別基礎(chǔ).北京:國防工業(yè)出版社,2005
5 蔡蓮紅,黃德智,蔡 銳.現(xiàn)代語音技術(shù)基礎(chǔ)與應(yīng)用.北京:清華大學(xué)出版社,2003

本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點(diǎn)。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無法一一聯(lián)系確認(rèn)版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當(dāng)措施,避免給雙方造成不必要的經(jīng)濟(jì)損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲综合首页| 国产亚洲美州欧州综合国| 亚洲综合精品自拍| 亚洲国产午夜| 欧美一级大片在线观看| 亚洲一区二区三区免费视频| 国产精品久久久久久久久久直播| 欧美视频中文一区二区三区在线观看| 久久久久久高潮国产精品视| 亚洲欧美视频一区二区三区| 在线中文字幕不卡| 亚洲最新视频在线播放| 久久精品亚洲一区二区| 亚洲欧美日韩在线不卡| 狠狠狠色丁香婷婷综合久久五月 | 欧美日韩精品一二三区| 欧美激情综合网| 欧美日本免费一区二区三区| 欧美日韩伦理在线| 欧美三区不卡| 国产精品久久999| 国产精品网站在线播放| 国产伦精品一区二区三区视频黑人| 国产精品理论片在线观看| 国产精品嫩草久久久久| 国产精品天天看| 国产亚洲精品美女| 红桃视频一区| 亚洲国产欧美另类丝袜| 亚洲欧洲三级| 在线视频日本亚洲性| 亚洲一区二区视频| 欧美一区三区三区高中清蜜桃| 久久精品国产免费| 91久久午夜| 亚洲视频观看| 欧美一级黄色网| 久久免费视频网站| 欧美激情亚洲国产| 国产精品日本欧美一区二区三区| 国产精品自拍小视频| 激情欧美一区| 日韩视频免费观看高清完整版| 中国成人在线视频| 欧美一级片久久久久久久| 亚洲欧洲日产国产综合网| 一区二区欧美精品| 欧美一级二级三级蜜桃| 你懂的视频一区二区| 欧美日韩成人在线视频| 国产精品亚洲综合天堂夜夜| 国内成人自拍视频| 亚洲精品国产精品国自产观看浪潮| 亚洲午夜精品一区二区| 亚洲观看高清完整版在线观看| 99国产欧美久久久精品| 欧美一区二区三区免费大片| 噜噜噜91成人网| 国产精品多人| 影音先锋日韩资源| 亚洲一区二区三区色| 亚洲国产成人一区| 亚洲女爱视频在线| 久久久青草婷婷精品综合日韩 | 久久久一本精品99久久精品66| 欧美精品色网| 国产亚洲欧美激情| 99亚洲视频| 亚洲电影免费观看高清| 亚洲一区二区欧美| 久久综合五月天婷婷伊人| 国产精品成人一区二区三区吃奶| 红桃视频成人| 亚洲影视中文字幕| 夜夜夜久久久| 久久精品夜色噜噜亚洲aⅴ| 亚洲天堂网在线观看| 久久亚洲不卡| 一区二区三区视频在线播放| 亚洲国产专区| 性一交一乱一区二区洋洋av| 欧美高清视频在线观看| 国产免费一区二区三区香蕉精| 亚洲三级影片| 久久精品免费播放| 午夜激情亚洲| 欧美日本一区二区三区| 一区免费观看视频| 亚洲欧美不卡| 亚洲午夜激情网页| 欧美国产一区在线| 国内一区二区三区在线视频| 亚洲午夜激情| 一区二区三区蜜桃网| 裸体歌舞表演一区二区| 国产精品一区二区你懂得| 亚洲精选国产| 亚洲精品日韩激情在线电影| 久久综合给合久久狠狠狠97色69| 国产精品女人毛片| 一区二区三区免费观看| 一本不卡影院| 欧美精品二区| 91久久久久久久久久久久久| 亚洲夫妻自拍| 久久噜噜噜精品国产亚洲综合| 国产精品久久久久秋霞鲁丝 | 国产精品拍天天在线| 91久久精品国产91久久性色tv| 亚洲国产精品美女| 久久久久久久激情视频| 国产欧美丝祙| 午夜精品视频在线观看一区二区| 亚洲自拍偷拍视频| 国产精品成人免费精品自在线观看| 亚洲精品之草原avav久久| 亚洲精品综合精品自拍| 欧美99在线视频观看| 有坂深雪在线一区| 91久久久久久| 欧美岛国在线观看| 最新日韩欧美| 一区二区三区**美女毛片| 欧美日韩激情小视频| 亚洲美女啪啪| 亚洲一区二区精品视频| 国产精品国色综合久久| 亚洲午夜激情| 久久aⅴ国产紧身牛仔裤| 国产欧美精品| 欧美一区2区三区4区公司二百| 欧美在线一二三四区| 国产亚洲精品综合一区91| 欧美在线看片| 蜜臀av性久久久久蜜臀aⅴ| 亚洲国产成人久久| 日韩一区二区高清| 欧美色图麻豆| 亚洲一区二区三区精品在线观看 | 欧美在线网址| 红桃视频一区| 亚洲美女黄色片| 欧美性猛交xxxx乱大交退制版| 亚洲视屏在线播放| 亚洲欧美另类在线观看| 国产日韩亚洲欧美| 亚洲国产精品va在线看黑人动漫| 欧美国产高清| 一区二区三区欧美在线观看| 久久国产精品亚洲77777| 狠狠久久婷婷| 一本久道久久综合狠狠爱| 欧美性色视频在线| 欧美伊人影院| 欧美人成免费网站| 一本色道精品久久一区二区三区| 欧美一区二区三区免费观看| 尤物在线观看一区| 亚洲性感激情| 国产资源精品在线观看| 亚洲精品美女在线观看| 欧美午夜性色大片在线观看| 欧美一级淫片aaaaaaa视频| 欧美激情第9页| 亚洲男人的天堂在线观看| 久久亚洲欧洲| 一本色道久久99精品综合| 久久久久久久成人| 99www免费人成精品| 久久国产一区| 亚洲精品一区二区三区不| 羞羞漫画18久久大片| 亚洲国产精品一区制服丝袜| 亚洲欧美日韩精品久久奇米色影视| 国内精品美女av在线播放| 一区二区国产精品| 国产亚洲激情| 亚洲视频高清| 在线观看福利一区| 午夜精品在线| 亚洲国产精品一区二区第四页av | 久久伊人亚洲| 夜夜嗨一区二区| 浪潮色综合久久天堂| 亚洲午夜性刺激影院| 欧美jizz19性欧美| 午夜精品视频在线观看一区二区| 欧美精品一区二区三区久久久竹菊 | 两个人的视频www国产精品| 一区二区三区日韩在线观看| 久久人人超碰| 亚洲免费伊人电影在线观看av| 欧美韩国日本综合| 欧美亚洲三区| 国产精品二区三区四区| 亚洲啪啪91| 韩国视频理论视频久久| 亚洲伊人色欲综合网| 亚洲黄色在线| 久久夜色精品国产噜噜av|