《電子技術應用》
您所在的位置:首頁 > 可編程邏輯 > 業界動態 > 基于仿生學和SoPC的嵌入式聲源定位器

基于仿生學和SoPC的嵌入式聲源定位器

2008-05-06
作者:梁志毅,高金山,董文杰

  摘 要: 論述了基于人體仿生學和嵌入式軟核的可編程片上系統SoPC的研究與實現。
  關鍵詞: 仿生學 SoPC 數字信號并行處理 嵌入式聲源定位" title="聲源定位">聲源定位器


  眾所周知,人的聽覺系統可以對所聽到的特定聲音來源進行定位。所謂的“雞尾酒會效應”[1]就是指人耳可以在一定的噪音背景下惟一地關注一個指定的聲音。結合嵌入式系統小巧靈活的特點和日益強大的功能,實現這樣的一種仿生聲源定位器" title="定位器">定位器,可以有效地對聽障人士的日常生活起到幫助作用,例如躲避突發的危險狀況、日常的人際交往等。更廣泛地看,這種系統可應用于機器人的聽覺系統、保安保密設施等諸多領域。
  為與基于ASIC技術的聲源定位器[2]區別,本文基于SoPC技術,在Altera的stratix系統平臺上,充分利用SoPC靈活的可重用設計特性和FPGA的信號并行處理能力,用一個MIC陣列,模擬人耳的聽覺系統,實現聲源定位器。并利用其良好的擴展性,進一步將系統從單CPU架構擴展至雙CPU架構,加入了語音識別" title="語音識別">語音識別的功能(本文只重點論述聲源定位的研究與實現)。
  在一個相對安靜的房間里對定位器進行測試,在5米的直徑范圍內,可以較準確地通過LCD輸出聲源的位置坐標。同時,對于簡單的短語,經過訓練之后,系統能夠在不超過1秒的時間內產生指定的響應,如在LCD上顯示相應的文字、振動器振動報警等。
1 人耳聽覺模型的基本原理
  在一個簡單的人耳聽覺系統模型中,聲源定位可以描述為:(1)從各種不同頻率的聲音中解析發現特定的聲音,如從一定的環境噪聲背景中找到特定聲源所發出的聲音。(2)獲得聲音到達MIC陣列的端點,即端點檢測" title="端點檢測">端點檢測。(3)聽覺系統根據聲音到達兩耳的時間差,判斷出聲源的方向和位置。
  根據上述人耳聽覺的機理,所設計的聲源定位器需要解決聲音的噪音過濾、端點檢測及方位距離算法等問題。
  (1)聲音的噪音過濾和端點檢測。對于噪音的簡單過濾和聲音的端點檢測,可以通過常用的“雙門限法”實現。
  本文利用Matlab下的Simulink作為原理驗證工具。驗證無誤后,將對應的FIR數字濾波器的階數和系數直接填入到Quartus II提供的FIR IP Core模塊中參數化,再在VHDL用戶模塊例化,即可完成FPGA中的語音信號預處理模塊的搭建工作。
  (2)聲源定位算法。系統中共使用了3個MIC,分別位于水平面上邊長為20cm的等邊三角形的三個頂點。借助于端點檢測,可獲取聲音到達各個MIC時對應的不同計數值n(對應有t=n/f,其中t為聲音傳播時間,f為采樣頻率),從而得到時延估計。經過前端的信號預處理工作,再充分利用聲源傳播中的先驗信息,基于空間幾何知識建立的算法模型,定位精度基本上達到了應用要求。MIC陣列擺放如圖1所示。


  因為該設備主要是針對聾啞人的語音輔助開發的,所以通常情況下聲源是與MIC陣列確定的平面共面或近似共面的。在近似共面的情形時,將數學模型擴展到三維的情況,即MIC陣列確定一個平面,而聲源不在該平面內。此時,以原點為中心,假設聲源位于一個橫截面直徑為3~10m的環狀空間中,且聲源到MIC陣列平面(橫截面)的垂直距離不超過±1m??沈炞C,聲源到原點的距離與聲源在MIC陣列平面投影點到原點的距離,二者偏差僅在4%左右。所以,為便于計算和構建模型,可以假設聲源與MIC陣列共面。
2 系統架構
  系統基本架構由Avalon Bus和兩個NIOS II CPU組成。NIOS II是基于哈佛結構的RISC通用嵌入式處理器軟核,能與用戶邏輯相結合。該處理器具有32位指令集、32位數據通道和可配置的指令及數據緩沖。本文選用標準型內核搭建系統。
  利用外圍ADC電路并通過IIS總線,三路" title="三路">三路MIC并行地將各自采集到的語音信號傳入AD Receiver模塊。該模塊是利用VHDL構建的用戶外設,用以橋接Avalon總線和ADC,同時完成三路語音信號的并行預處理。
  單路信號處理過程如下所述:
  將ADC傳入的串行信號轉換成16位的并行信號送入FIFO1。每一個并行信號即一個采樣點,定義每2 400個點為一幀,選取FIFO1容量為16bit×2560=5KB。存儲點數達到一幀后,將該幀逐點送入短時能量分析模塊、短時過零率分析模塊和FIFO2,計數器同時計數。FIFO2的容量與FIFO1相同。如果該幀沒有達到短時能量和過零率的閾值觸發要求,則該幀為無效幀;如果只達到過零率的觸發要求,則該幀為有效幀,暫時保留在FIFO2中,其后一幀若短時能量閾值觸發則回溯前一幀定位端點,否則兩幀都舍棄;如果某幀同時達到短時能量和過零率的觸發要求,則聲音起始端點即為該幀內部觸發過零率閾值的那一點。在這里,設置短時能量的觸發閾值EH為0.01,約為平穩狀態時能量值的5倍;短時過零率公式中修正閾值T為0.01,當短時過零率幅值發生大于3倍的突變時,則認為過零率閾值觸發。另外,為便于能量閾值觸發后的回溯查尋,設置了同樣為5KB的FIFO3、FIFO4,分別存儲短時過零率和短時能量的數據。
  將取得的聲音端點值傳至CPU1進行定位計算。CPU1利用Avalon總線與CPU2及系統其他模塊進行信息交換和處理。
  系統硬件結構如圖2、圖3所示。

?


  NIOS II提供了良好的系統擴展性和可編輯性,當系統引入語音識別功能使性能要求提高時,在不改變原有系統架構的基礎上,通過增加共享內存互斥鎖和共享內存,系統即可方便快速地擴展成為雙CPU架構。其中定義CPU1對前段采集的數據進行定位處理,將處理過的數據傳入CPU2,由CPU2完成識別及LCD顯示的功能,如圖3所示。
3 實驗
  在一個相對安靜的房間中對系統進行了測試。房間大小約為(8×6×3)m3,環境噪聲以持續的音樂模擬,約為40~50dB,待檢測聲音約為65~70dB。人發聲的位置在圖1所示的平面坐標系中選擇。
  圖4顯示了實驗中某個MIC的聲音預處理波形。聲音信號從左往右依次是你好、危險、早上好三句話,其中利用了223階的FIR線性濾波器實現信號處理功能,其窗函數為矩形窗。


  從圖4中可以明顯看出:因為背景音樂和說話前后的呼吸,原始聲音波形中出現明顯的干擾信號(背景噪音),但經過短時能量分析后,短時能量分析圖中的干擾部分已經被過濾掉。實驗證明,將短時能量分析與短時過零率結合,可以較好地檢測到聲音的端點。
  利用FPGA可并行處理的特性,實時監控三路MIC的聲音處理信號,比較各路聲音端點對應的不同n值,得出三個時間差,代入定位計算公式,從而定位聲源位置。
  本文論述了基于人體仿生學和NIOS II的聲源定位器。系統分為語音信號采集預處理和定位計算兩個基本部分及語音識別一個擴展部分。整個系統在實現過程中:
  (1)利用FPGA的并行特性實現了三路語音信號的并行采集和處理;
  (2)利用嵌入式的軟核NIOS II搭建了雙CPU結構。其中CPU1實現了對聲源定位的算法,CPU2實現了對語音識別及響應的功能;
  (3)利用NIOS II提供的硬件互斥鎖機制實現了CPU間的良好同步通信。
  從該系統的研究與實現中可以看到,SoPC的多核結構在低功耗、小面積、低成本的前提下提供了實現強大功能的可能。在聲源定位、語音識別的基礎上,結合語音合成技術,可為聾啞人提供更完善的幫助。而較高的性價比也將使這樣的系統進入更多更廣泛的生活工作應用領域。
參考文獻
1 Jie Huang,Ohnishi N,Sugie N.A Biomimetic System for Localization and Separation of Multi-ple Sound Sources.Instrumentation and Measure-ment.IEEE Transactions,1995;44(3)
2 Stanacevic M,Cauwenberghs G.Micorpower Gra-dient Flow Acoustic Localizer.Circuits and Sys-tems I:Regular Papers,IEEE Transactions on[seealso Circuits and Systems I:Fundamental Theory and Applications.IEEE Transactions,2005;52(10)
3 胡 航.語音信號處理.哈爾濱:哈爾濱工業大學出版社,2002
4 王炳錫,屈 丹,彭 煊.實用語音識別基礎.北京:國防工業出版社,2005
5 蔡蓮紅,黃德智,蔡 銳.現代語音技術基礎與應用.北京:清華大學出版社,2003

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美亚洲视频| 欧美成人免费在线观看| 亚洲国产乱码最新视频| 亚洲免费中文| 亚洲性视频网址| 这里只有精品视频| 一区二区不卡在线视频 午夜欧美不卡在 | 99精品久久免费看蜜臀剧情介绍| 亚洲欧洲偷拍精品| 亚洲人成在线观看| 亚洲精品美女| 日韩视频永久免费| 在线性视频日韩欧美| 亚洲视频在线二区| 亚洲一区在线观看免费观看电影高清| 中文在线资源观看视频网站免费不卡| 在线亚洲成人| 亚洲欧美综合网| 欧美中文字幕视频在线观看| 久久都是精品| 亚洲黄色在线| 日韩小视频在线观看| 中文在线资源观看视频网站免费不卡| 亚洲午夜免费福利视频| 亚洲欧美成人一区二区在线电影| 午夜精品久久久久久久| 欧美主播一区二区三区美女 久久精品人| 欧美在线不卡| 免费在线看一区| 欧美日韩999| 国产精品美女www爽爽爽| 国产精品夜色7777狼人 | 国产一区二区成人| 在线观看亚洲精品| 亚洲精品一区二区三区不| 99在线精品观看| 亚洲欧美国产精品va在线观看 | 亚洲黄色在线观看| 在线午夜精品自拍| 午夜精品久久久久影视| 久久精品日产第一区二区三区| 久久资源av| 欧美日韩一区二区三区视频| 国产精品免费在线| 黑人极品videos精品欧美裸| 亚洲国产日韩欧美在线动漫| av不卡在线| 久久国产一二区| 99在线精品观看| 欧美一级日韩一级| 欧美96在线丨欧| 国产精品视频久久一区| 在线观看成人网| 一二三区精品福利视频| 久久99在线观看| 亚洲视频免费| 久久一区二区三区四区五区| 欧美日韩三级| 娇妻被交换粗又大又硬视频欧美| 亚洲精品一二三区| 欧美一级黄色网| 在线亚洲一区观看| 久久综合久色欧美综合狠狠| 欧美调教视频| 亚洲第一网站免费视频| 亚洲小说区图片区| 亚洲九九精品| 久久精品国产一区二区三区| 欧美日韩国产一区二区| 国产一区二区三区在线观看免费视频 | 老司机一区二区| 国产精品久久久久久妇女6080 | 欧美日韩福利| 韩国av一区二区三区在线观看| 日韩视频精品在线| 久久成人国产精品| 亚洲自拍偷拍网址| 欧美激情一区二区久久久| 国产区亚洲区欧美区| 日韩天堂在线视频| 亚洲二区在线视频| 午夜精品久久久久久99热| 欧美伦理91i| 一区二区三区在线高清| 亚洲综合另类| 亚洲午夜激情在线| 欧美不卡视频一区| 国产综合在线视频| 亚洲综合三区| 亚洲永久免费视频| 欧美精品国产一区| 亚洲第一在线视频| 久久精品人人爽| 久久精品国产欧美激情| 欧美午夜视频在线| 亚洲精品乱码视频| 亚洲激情在线播放| 久久婷婷久久| 国产亚洲精品bt天堂精选| 亚洲一区二区视频在线观看| 在线中文字幕不卡| 欧美女激情福利| 亚洲国产高清在线| 亚洲国产成人久久综合一区| 久久成人精品| 国产色产综合产在线视频| 亚洲一二三级电影| 亚洲欧美精品伊人久久| 国产精品av久久久久久麻豆网| 亚洲精品中文在线| 日韩视频―中文字幕| 欧美本精品男人aⅴ天堂| 一区视频在线| 最新中文字幕亚洲| 欧美成人免费网| 亚洲欧洲精品一区二区三区 | 先锋亚洲精品| 国产伦精品免费视频| 亚洲欧美日韩精品久久亚洲区 | 亚洲精品一区二区网址| 亚洲最新在线视频| 欧美日韩日本视频| 在线亚洲国产精品网站| 亚洲欧美日韩在线高清直播| 国产精品家教| 亚洲欧美卡通另类91av| 午夜国产不卡在线观看视频| 国产精品久在线观看| 亚洲欧美日韩一区| 久久久久久网址| 激情婷婷亚洲| 亚洲日本视频| 欧美日在线观看| 亚洲小说欧美另类社区| 欧美在线视频导航| 韩国一区电影| 亚洲经典在线| 欧美日韩免费观看中文| 夜夜精品视频一区二区| 午夜欧美不卡精品aaaaa| 国产日产高清欧美一区二区三区| 久久se精品一区精品二区| 美女日韩欧美| 亚洲精品乱码久久久久| 亚洲免费综合| 国产一本一道久久香蕉| 久久精品一本| 欧美日韩国产精品一区| 亚洲一区二区三区四区五区黄| 久久激情婷婷| 亚洲黄色在线| 亚洲欧美伊人| 激情成人综合| 一区二区三区欧美视频| 国产农村妇女精品| 欧美专区亚洲专区| 欧美另类69精品久久久久9999| 亚洲一区综合| 欧美成人精品高清在线播放| 一本色道久久88综合亚洲精品ⅰ | 在线观看一区二区精品视频| 99精品视频免费全部在线| 国产精品va在线播放| 久久se精品一区精品二区| 欧美日韩国产电影| 欧美专区日韩视频| 欧美日韩亚洲一区在线观看| 亚洲欧美久久久| 欧美黄色片免费观看| 亚洲欧美国产高清va在线播| 欧美成人自拍| 亚洲资源在线观看| 欧美国产第一页| 欧美亚洲一区二区三区| 欧美精品电影| 欧美尤物巨大精品爽| 欧美日韩在线电影| 欧美制服丝袜第一页| 欧美日韩亚洲综合一区| 久久成人羞羞网站| 欧美天天在线| 亚洲日本欧美在线| 国产午夜精品一区理论片飘花| 99re这里只有精品6| 国语自产精品视频在线看| 亚洲一区二区少妇| 亚洲第一狼人社区| 久久国产精品久久久久久| 亚洲美女视频在线观看| 久久美女性网| 亚洲欧美日韩国产成人| 欧美国产第二页| 久久精品女人的天堂av| 国产精品青草久久久久福利99| 亚洲精品中文字幕女同| 国产综合久久久久影院| 亚洲欧美日韩一区二区三区在线观看 | 久久精品午夜| 国产日本欧美一区二区三区在线 | 久久久午夜视频|