《電子技術(shù)應(yīng)用》
您所在的位置:首頁 > 可編程邏輯 > 業(yè)界動態(tài) > 基于仿生學(xué)和SoPC的嵌入式聲源定位器

基于仿生學(xué)和SoPC的嵌入式聲源定位器

2008-05-06
作者:梁志毅,高金山,董文杰

  摘 要: 論述了基于人體仿生學(xué)和嵌入式軟核的可編程片上系統(tǒng)SoPC的研究與實現(xiàn)。
  關(guān)鍵詞: 仿生學(xué) SoPC 數(shù)字信號并行處理 嵌入式聲源定位" title="聲源定位">聲源定位器


  眾所周知,人的聽覺系統(tǒng)可以對所聽到的特定聲音來源進(jìn)行定位。所謂的“雞尾酒會效應(yīng)”[1]就是指人耳可以在一定的噪音背景下惟一地關(guān)注一個指定的聲音。結(jié)合嵌入式系統(tǒng)小巧靈活的特點(diǎn)和日益強(qiáng)大的功能,實現(xiàn)這樣的一種仿生聲源定位器" title="定位器">定位器,可以有效地對聽障人士的日常生活起到幫助作用,例如躲避突發(fā)的危險狀況、日常的人際交往等。更廣泛地看,這種系統(tǒng)可應(yīng)用于機(jī)器人的聽覺系統(tǒng)、保安保密設(shè)施等諸多領(lǐng)域。
  為與基于ASIC技術(shù)的聲源定位器[2]區(qū)別,本文基于SoPC技術(shù),在Altera的stratix系統(tǒng)平臺上,充分利用SoPC靈活的可重用設(shè)計特性和FPGA的信號并行處理能力,用一個MIC陣列,模擬人耳的聽覺系統(tǒng),實現(xiàn)聲源定位器。并利用其良好的擴(kuò)展性,進(jìn)一步將系統(tǒng)從單CPU架構(gòu)擴(kuò)展至雙CPU架構(gòu),加入了語音識別" title="語音識別">語音識別的功能(本文只重點(diǎn)論述聲源定位的研究與實現(xiàn))。
  在一個相對安靜的房間里對定位器進(jìn)行測試,在5米的直徑范圍內(nèi),可以較準(zhǔn)確地通過LCD輸出聲源的位置坐標(biāo)。同時,對于簡單的短語,經(jīng)過訓(xùn)練之后,系統(tǒng)能夠在不超過1秒的時間內(nèi)產(chǎn)生指定的響應(yīng),如在LCD上顯示相應(yīng)的文字、振動器振動報警等。
1 人耳聽覺模型的基本原理
  在一個簡單的人耳聽覺系統(tǒng)模型中,聲源定位可以描述為:(1)從各種不同頻率的聲音中解析發(fā)現(xiàn)特定的聲音,如從一定的環(huán)境噪聲背景中找到特定聲源所發(fā)出的聲音。(2)獲得聲音到達(dá)MIC陣列的端點(diǎn),即端點(diǎn)檢測" title="端點(diǎn)檢測">端點(diǎn)檢測。(3)聽覺系統(tǒng)根據(jù)聲音到達(dá)兩耳的時間差,判斷出聲源的方向和位置。
  根據(jù)上述人耳聽覺的機(jī)理,所設(shè)計的聲源定位器需要解決聲音的噪音過濾、端點(diǎn)檢測及方位距離算法等問題。
  (1)聲音的噪音過濾和端點(diǎn)檢測。對于噪音的簡單過濾和聲音的端點(diǎn)檢測,可以通過常用的“雙門限法”實現(xiàn)。
  本文利用Matlab下的Simulink作為原理驗證工具。驗證無誤后,將對應(yīng)的FIR數(shù)字濾波器的階數(shù)和系數(shù)直接填入到Quartus II提供的FIR IP Core模塊中參數(shù)化,再在VHDL用戶模塊例化,即可完成FPGA中的語音信號預(yù)處理模塊的搭建工作。
  (2)聲源定位算法。系統(tǒng)中共使用了3個MIC,分別位于水平面上邊長為20cm的等邊三角形的三個頂點(diǎn)。借助于端點(diǎn)檢測,可獲取聲音到達(dá)各個MIC時對應(yīng)的不同計數(shù)值n(對應(yīng)有t=n/f,其中t為聲音傳播時間,f為采樣頻率),從而得到時延估計。經(jīng)過前端的信號預(yù)處理工作,再充分利用聲源傳播中的先驗信息,基于空間幾何知識建立的算法模型,定位精度基本上達(dá)到了應(yīng)用要求。MIC陣列擺放如圖1所示。


  因為該設(shè)備主要是針對聾啞人的語音輔助開發(fā)的,所以通常情況下聲源是與MIC陣列確定的平面共面或近似共面的。在近似共面的情形時,將數(shù)學(xué)模型擴(kuò)展到三維的情況,即MIC陣列確定一個平面,而聲源不在該平面內(nèi)。此時,以原點(diǎn)為中心,假設(shè)聲源位于一個橫截面直徑為3~10m的環(huán)狀空間中,且聲源到MIC陣列平面(橫截面)的垂直距離不超過±1m。可驗證,聲源到原點(diǎn)的距離與聲源在MIC陣列平面投影點(diǎn)到原點(diǎn)的距離,二者偏差僅在4%左右。所以,為便于計算和構(gòu)建模型,可以假設(shè)聲源與MIC陣列共面。
2 系統(tǒng)架構(gòu)
  系統(tǒng)基本架構(gòu)由Avalon Bus和兩個NIOS II CPU組成。NIOS II是基于哈佛結(jié)構(gòu)的RISC通用嵌入式處理器軟核,能與用戶邏輯相結(jié)合。該處理器具有32位指令集、32位數(shù)據(jù)通道和可配置的指令及數(shù)據(jù)緩沖。本文選用標(biāo)準(zhǔn)型內(nèi)核搭建系統(tǒng)。
  利用外圍ADC電路并通過IIS總線,三路" title="三路">三路MIC并行地將各自采集到的語音信號傳入AD Receiver模塊。該模塊是利用VHDL構(gòu)建的用戶外設(shè),用以橋接Avalon總線和ADC,同時完成三路語音信號的并行預(yù)處理。
  單路信號處理過程如下所述:
  將ADC傳入的串行信號轉(zhuǎn)換成16位的并行信號送入FIFO1。每一個并行信號即一個采樣點(diǎn),定義每2 400個點(diǎn)為一幀,選取FIFO1容量為16bit×2560=5KB。存儲點(diǎn)數(shù)達(dá)到一幀后,將該幀逐點(diǎn)送入短時能量分析模塊、短時過零率分析模塊和FIFO2,計數(shù)器同時計數(shù)。FIFO2的容量與FIFO1相同。如果該幀沒有達(dá)到短時能量和過零率的閾值觸發(fā)要求,則該幀為無效幀;如果只達(dá)到過零率的觸發(fā)要求,則該幀為有效幀,暫時保留在FIFO2中,其后一幀若短時能量閾值觸發(fā)則回溯前一幀定位端點(diǎn),否則兩幀都舍棄;如果某幀同時達(dá)到短時能量和過零率的觸發(fā)要求,則聲音起始端點(diǎn)即為該幀內(nèi)部觸發(fā)過零率閾值的那一點(diǎn)。在這里,設(shè)置短時能量的觸發(fā)閾值EH為0.01,約為平穩(wěn)狀態(tài)時能量值的5倍;短時過零率公式中修正閾值T為0.01,當(dāng)短時過零率幅值發(fā)生大于3倍的突變時,則認(rèn)為過零率閾值觸發(fā)。另外,為便于能量閾值觸發(fā)后的回溯查尋,設(shè)置了同樣為5KB的FIFO3、FIFO4,分別存儲短時過零率和短時能量的數(shù)據(jù)。
  將取得的聲音端點(diǎn)值傳至CPU1進(jìn)行定位計算。CPU1利用Avalon總線與CPU2及系統(tǒng)其他模塊進(jìn)行信息交換和處理。
  系統(tǒng)硬件結(jié)構(gòu)如圖2、圖3所示。

?


  NIOS II提供了良好的系統(tǒng)擴(kuò)展性和可編輯性,當(dāng)系統(tǒng)引入語音識別功能使性能要求提高時,在不改變原有系統(tǒng)架構(gòu)的基礎(chǔ)上,通過增加共享內(nèi)存互斥鎖和共享內(nèi)存,系統(tǒng)即可方便快速地擴(kuò)展成為雙CPU架構(gòu)。其中定義CPU1對前段采集的數(shù)據(jù)進(jìn)行定位處理,將處理過的數(shù)據(jù)傳入CPU2,由CPU2完成識別及LCD顯示的功能,如圖3所示。
3 實驗
  在一個相對安靜的房間中對系統(tǒng)進(jìn)行了測試。房間大小約為(8×6×3)m3,環(huán)境噪聲以持續(xù)的音樂模擬,約為40~50dB,待檢測聲音約為65~70dB。人發(fā)聲的位置在圖1所示的平面坐標(biāo)系中選擇。
  圖4顯示了實驗中某個MIC的聲音預(yù)處理波形。聲音信號從左往右依次是你好、危險、早上好三句話,其中利用了223階的FIR線性濾波器實現(xiàn)信號處理功能,其窗函數(shù)為矩形窗。


  從圖4中可以明顯看出:因為背景音樂和說話前后的呼吸,原始聲音波形中出現(xiàn)明顯的干擾信號(背景噪音),但經(jīng)過短時能量分析后,短時能量分析圖中的干擾部分已經(jīng)被過濾掉。實驗證明,將短時能量分析與短時過零率結(jié)合,可以較好地檢測到聲音的端點(diǎn)。
  利用FPGA可并行處理的特性,實時監(jiān)控三路MIC的聲音處理信號,比較各路聲音端點(diǎn)對應(yīng)的不同n值,得出三個時間差,代入定位計算公式,從而定位聲源位置。
  本文論述了基于人體仿生學(xué)和NIOS II的聲源定位器。系統(tǒng)分為語音信號采集預(yù)處理和定位計算兩個基本部分及語音識別一個擴(kuò)展部分。整個系統(tǒng)在實現(xiàn)過程中:
  (1)利用FPGA的并行特性實現(xiàn)了三路語音信號的并行采集和處理;
  (2)利用嵌入式的軟核NIOS II搭建了雙CPU結(jié)構(gòu)。其中CPU1實現(xiàn)了對聲源定位的算法,CPU2實現(xiàn)了對語音識別及響應(yīng)的功能;
  (3)利用NIOS II提供的硬件互斥鎖機(jī)制實現(xiàn)了CPU間的良好同步通信。
  從該系統(tǒng)的研究與實現(xiàn)中可以看到,SoPC的多核結(jié)構(gòu)在低功耗、小面積、低成本的前提下提供了實現(xiàn)強(qiáng)大功能的可能。在聲源定位、語音識別的基礎(chǔ)上,結(jié)合語音合成技術(shù),可為聾啞人提供更完善的幫助。而較高的性價比也將使這樣的系統(tǒng)進(jìn)入更多更廣泛的生活工作應(yīng)用領(lǐng)域。
參考文獻(xiàn)
1 Jie Huang,Ohnishi N,Sugie N.A Biomimetic System for Localization and Separation of Multi-ple Sound Sources.Instrumentation and Measure-ment.IEEE Transactions,1995;44(3)
2 Stanacevic M,Cauwenberghs G.Micorpower Gra-dient Flow Acoustic Localizer.Circuits and Sys-tems I:Regular Papers,IEEE Transactions on[seealso Circuits and Systems I:Fundamental Theory and Applications.IEEE Transactions,2005;52(10)
3 胡 航.語音信號處理.哈爾濱:哈爾濱工業(yè)大學(xué)出版社,2002
4 王炳錫,屈 丹,彭 煊.實用語音識別基礎(chǔ).北京:國防工業(yè)出版社,2005
5 蔡蓮紅,黃德智,蔡 銳.現(xiàn)代語音技術(shù)基礎(chǔ)與應(yīng)用.北京:清華大學(xué)出版社,2003

本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點(diǎn)。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無法一一聯(lián)系確認(rèn)版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當(dāng)措施,避免給雙方造成不必要的經(jīng)濟(jì)損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
国产一区二区成人| 亚洲网站视频福利| 国产精品成人观看视频国产奇米| 欧美暴力喷水在线| 久久亚洲欧洲| 久久精品在线观看| 久久国产精品一区二区三区四区| 亚洲免费一级电影| 亚洲一区二区不卡免费| 日韩性生活视频| 亚洲精品国产拍免费91在线| 亚洲精品1234| 亚洲日本在线视频观看| 亚洲欧洲一二三| 亚洲精品资源美女情侣酒店| 亚洲精选一区| 一区二区欧美在线| 亚洲午夜极品| 亚洲欧美日韩电影| 性色av香蕉一区二区| 欧美一区二区免费| 久久精品99国产精品日本| 久久成人免费网| 久久久久久精| 免费在线国产精品| 欧美精品日韩精品| 欧美三级日本三级少妇99| 欧美午夜剧场| 国产日韩精品一区二区三区在线| 狠狠久久亚洲欧美专区| 亚洲国产成人tv| 亚洲三级网站| 亚洲网站在线播放| 香蕉久久夜色精品国产使用方法| 久久精品论坛| 99精品国产在热久久婷婷| 亚洲一区在线免费观看| 欧美资源在线| 蜜臀久久99精品久久久久久9| 欧美激情小视频| 欧美久久电影| 国产精品亚洲人在线观看| 国语自产精品视频在线看| 亚洲第一天堂av| 一区二区免费在线播放| 欧美一区三区二区在线观看| 亚洲韩国青草视频| 一区二区三区国产在线| 欧美一级视频精品观看| 葵司免费一区二区三区四区五区| 欧美久久久久久蜜桃| 国产精品欧美精品| 影音先锋亚洲视频| 日韩午夜免费视频| 欧美一区二区三区免费看| 亚洲三级影院| 欧美伊人影院| 欧美激情 亚洲a∨综合| 国产精品亚洲综合久久| 亚洲国产高清自拍| 亚洲欧美日韩精品在线| 最新国产精品拍自在线播放| 亚洲性夜色噜噜噜7777| 久久久综合视频| 欧美视频在线观看视频极品| 国产亚洲美州欧州综合国| 亚洲欧洲视频| 欧美亚洲综合久久| 一级日韩一区在线观看| 久久精品盗摄| 欧美日韩免费高清| 国外成人性视频| 一本色道久久综合精品竹菊| 久久国产黑丝| 亚洲欧美日韩电影| 欧美国产欧美亚州国产日韩mv天天看完整| 国产精品xxxxx| 在线观看三级视频欧美| 亚洲自拍偷拍一区| 日韩午夜精品视频| 久久久久国产精品一区三寸| 国产精品白丝av嫩草影院 | 91久久精品www人人做人人爽| 亚洲摸下面视频| 亚洲视频一区二区| 欧美成人综合| 国产一区二区三区日韩| av成人免费| 亚洲毛片一区| 裸体丰满少妇做受久久99精品| 国产伦理一区| 中文日韩在线| 亚洲婷婷综合色高清在线| 久色婷婷小香蕉久久| 国产欧美日韩伦理| 亚洲视频在线观看网站| 一二三四社区欧美黄| 欧美不卡在线| 一区二区视频在线观看| 欧美一区激情| 久久精品中文字幕一区| 国产精品视频yy9299一区| 日韩亚洲综合在线| 日韩小视频在线观看专区| 欧美成人免费va影院高清| 激情另类综合| 亚洲第一精品福利| 久久久www成人免费毛片麻豆| 国产情侣久久| 亚洲综合不卡| 欧美一区亚洲二区| 国产欧美日韩精品一区| 亚洲在线一区| 欧美在线视频导航| 国产欧美另类| 欧美一区二区三区在线免费观看| 欧美一区二区三区在线看| 国产欧美日本| 午夜精品福利视频| 欧美在线黄色| 国产有码一区二区| 久久福利毛片| 乱中年女人伦av一区二区| 伊人久久综合| 亚洲精选视频在线| 欧美日本视频在线| 99xxxx成人网| 亚洲欧美日韩国产综合在线| 国产精品美女| 亚洲免费在线观看| 欧美一区二区三区另类| 国产视频综合在线| 久久精品亚洲乱码伦伦中文| 猫咪成人在线观看| 亚洲第一中文字幕在线观看| 99riav国产精品| 欧美天堂亚洲电影院在线播放 | 亚洲另类黄色| 欧美日韩一区在线观看| 亚洲桃色在线一区| 久久av资源网站| 一区二区在线视频| 日韩一区二区精品视频| 国产精品va在线| 欧美一区1区三区3区公司| 久久综合免费视频影院| 亚洲国产精品一区二区www在线| aa成人免费视频| 国产精品久久久久久福利一牛影视| 亚洲主播在线观看| 久久婷婷成人综合色| 最新日韩av| 亚洲砖区区免费| 国产亚洲a∨片在线观看| 亚洲国产日本| 国产精品成人播放| 久久精品视频亚洲| 欧美日韩中文字幕综合视频| 亚洲欧美久久| 欧美成人性网| 亚洲一本大道在线| 久久综合网hezyo| 一区二区三区国产精华| 久久精品综合一区| 亚洲另类春色国产| 久久精品国产v日韩v亚洲 | 国产午夜精品理论片a级大结局| 亚洲欧洲日韩综合二区| 国产精品成人久久久久| 久久精品亚洲| 国产精品高潮呻吟久久av黑人 | 亚洲另类一区二区| 国产精品一级二级三级| 亚洲经典自拍| 国产精品亚洲第一区在线暖暖韩国| 亚洲黄色免费电影| 国产精品视频免费在线观看| 亚洲国产日韩欧美| 国产精品久久久久久影院8一贰佰| 久久精品日韩欧美| 国产精品久久久久久久久久直播| 亚洲国产第一页| 国产精品亚洲аv天堂网| 亚洲精品在线免费| 国产一区在线免费观看| 亚洲性人人天天夜夜摸| 在线成人av网站| 久久aⅴ国产紧身牛仔裤| 日韩视频一区二区在线观看| 久久在线精品| 亚洲午夜视频在线| 欧美激情视频一区二区三区免费| 欧美一级大片在线观看| 欧美午夜不卡在线观看免费| 亚洲国产免费| 国产曰批免费观看久久久| 午夜精品福利视频| 亚洲精品综合精品自拍| 另类尿喷潮videofree| 亚洲综合成人在线|