《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 一種基于DSP的音頻實時處理系統(tǒng)
一種基于DSP的音頻實時處理系統(tǒng)
摘要: 本文通過結合相關的自適應濾波器以及非線程處理和噪音抑制等算法,并在基于TI 的TMS320C6713B上實現(xiàn)和優(yōu)化,實現(xiàn)了高效率的聲學回聲、噪聲消除實時處理系統(tǒng)。通過實際應用表明,該系統(tǒng)對噪音消除可達40 dB以上,對回音消除可達50 dB 以上,并具備良好的雙工處理能力。目前在本系統(tǒng)的基礎上已經延伸擴展出了多路輸入/ 輸出的專業(yè)數(shù)字音頻處理器,并實際應用在視頻會議系統(tǒng)中,取得了較好的體驗效果。
Abstract:
Key words :

    摘  要:聲學回聲消除器一直是視頻會議系統(tǒng)不可缺少的組件。將回聲消除算法結合噪音消除和靜音檢測算法等,提出一種改進的實時音頻處理系統(tǒng)方法,并在TMS320C6713B 上實現(xiàn),能夠有效改善噪音、雙工檢測、非線性回聲等導致自適應濾波器發(fā)散的問題。該系統(tǒng)在保證正常雙工通話的同時,對非線性回聲的抑制有著明顯的改善效果。

  0   引  言

  隨著VOIP 的廣泛應用以及多媒體通信技術的發(fā)展和成熟,人們對互聯(lián)網(wǎng)語音通信的音頻品質提出了更高的體驗要求。主流的視頻會議系統(tǒng)由原先的14 kHz升級到22 kHz 的音頻帶寬,這也標志著語音通信已經真正轉化為高品質音頻通信的應用階段。當然在基于互聯(lián)網(wǎng)的音頻通信中,聲學回聲和噪聲一直是影響音頻質量的最為關鍵因素之一。

  聲學回聲消除成為提升音頻通信質量的一個非常重要的環(huán)節(jié)。聲學回聲消除采用了自適應濾波來估計回聲產生的回路特征,并不斷修正自適應濾波器的系數(shù),使得估計值更加逼近真實回聲,最后從話筒信號中去除估計的回聲,以達到回音消除的目的。

  聲學回聲具有信號沖激響應時間長,特征分布范圍廣且多路徑反射和時變的特點,自適應濾波器在估計回聲路徑的過程中容易受到這些不確定因素的干擾,當然外部環(huán)境的噪音也是一個重要的因素。

  本系統(tǒng)結合多種已有信號處理算法,有效提升了聲學回聲的雙工能力和收斂速度,并有效避免了使濾波器發(fā)散的多種因素,提升了濾波器的處理效率。同時利用高速浮點DSP 對回聲消除和噪聲消除進行了整體的實現(xiàn)。

  系統(tǒng)采用了頻域的MDF 自適應濾波算法,將MMSE No ise Suppresso r 和多個VAD 添加到回聲消除器中。在加入濾波器系數(shù)更新模塊和非線性檢測模塊后,使得系統(tǒng)在更惡劣的噪音環(huán)境下以及雙方通話過程中,一樣具備良好的回聲消除和噪音消除能力。整個核心運算部分均在頻率域內完成,也大大降低了運算量,最后通過調整DSP 的數(shù)據(jù)結構,合理運用DSP 的資源和指令加速,實現(xiàn)了基于DSP 的高效能實時音頻處理器的設計。

  1   音頻處理系統(tǒng)相關算法

  1. 1   聲學回聲消除

  聲學回聲消除的基本原理是通過自適應濾波器估計聲學回聲路徑的特征參數(shù),產生一個模擬的聲學路徑,得出模擬的聲學回聲信號,并從參考信號中減去此信號,實現(xiàn)回聲的消除。圖1 給出了一個最為常見的聲學回聲消除器AEC 的原理圖。

 


圖1  聲學回聲消除器原理圖

  1. 2   結合噪音消除和靜音檢測的回聲處理系統(tǒng)

  1. 2. 1   MDF 濾波器基本結構和算法原理

  MDF( Multidelay Block Frequency Domain Adaptive Filter) 是一種將原有的多階濾波器分為K 個等分的子塊,在每個長度為N 的子塊能進行自適應濾波的方法。如此能降低多階自適應濾波器大量的運算量。

  F 表示對2N×2N 的矩陣進行FFT 變換,若v 表示信號幀序號,而diag 表示對角矩陣運算,則:

 


  假設實際路徑產生的回聲信號為y ( v) ,通常也叫近端信號,則:


 

  假設實際路徑產生的回聲信號為y ( v) ,通常也叫近端信號,則:


 


  式中,^hk = [ ^hkN ,^hkN + 1 ,… ,^hkN + N- 1 ] T ,k = 0,1,2,,K - 1,它表示濾波器估計的第k 個子濾波器的系數(shù)。

 

  1. 2. 2   改進的回聲消除系統(tǒng)

  如圖2 所示,通過加入靜音檢測算法( VAD) 對輸入信號的狀態(tài)進行判斷,不僅可以減輕實際的運算量,也可降低噪音對自適應濾波器的干擾,在一定程度上避免了濾波器發(fā)散的情況。同時加入MMSE Short t imeSpect ral Amplitude Estimator替代了傳統(tǒng)的非線性處理器( NLP) 算法。在頻域內對參與回聲的頻譜能量進行估計,計算增益,最后達到相對平滑的殘余回聲和噪音的處理。

一種結合噪音消除的回聲消除原理圖

圖2   一種結合噪音消除的回聲消除原理圖

  通過對濾波器狀態(tài)參數(shù)的跟蹤,根據(jù)濾波器當前是否正常收斂,殘余回聲估計模塊的輸出結果會自動調節(jié)估計值的大小,避免在濾波器正常收斂的情況下,抑制殘余回聲導致處理后正常信號損失過多的問題。

  圖2 中采用的靜音檢測算法( VAD) 采用了同時檢測短時能量與過零率的方法,保證了判斷的可靠性。

  在遠端語音不存在的時候,沒有必要進行回聲消除,只需要進行本地的噪音消除,若本地語音不存在則不需要做任何處理。

  結合VAD 系統(tǒng)更有效地減少了對噪音和回音估計的誤差范圍,通過對濾波器系數(shù)更新的學習和調整功能使得在雙方通話過程中音頻信號具備更好的信噪比。

  通過非線性信號檢測模塊加強了整體消除回音的能力。

  2   基于DSP 的音頻處理系統(tǒng)實現(xiàn)

  2. 1   硬件平臺

  DSP 的選型需要考慮運算速度、成本、硬件資源以及程序的可移植性等多個問題。由于算法的浮點特性,本文采用了美國德州儀器( T I) 的TMS320C6713B 浮點DSP 作為核心處理器,通過使用JT EG 標準測試接口、EDMA 控制器、GIPO 通用輸入輸出端口以及多通道音頻緩沖串口( McASP) 等主要片外設備來完成系統(tǒng)的設計。

  TMS320C6713B 可以工作在225 MHz 主頻上,片內有8 個并行處理單元,分為相同的兩組,其體系結構采用甚長指令字( V LIW) 結構,單指令字長為32 b,8 個指令組成一個指令包,總字長為256 b。L1 支持4 KB的程序緩存以及4 KB 的數(shù)據(jù)緩存,L2 支持64 KB 的緩存。32 b 的外部存儲器接口( EMIF) 。與SDRAM 等無縫連接,可以尋址256 MB。

  由于系統(tǒng)運行過程中需要實現(xiàn)的算法較多,僅依靠TMS320C6713B 的192 KB片內RAM 來執(zhí)行程序是很困難的。本文使用了EMIF 的接口擴展了SDRAM 作為算法和數(shù)據(jù)的存儲區(qū)域。采用TLV320AIC23B 實現(xiàn)音頻輸入和輸出,AIC23 支持48 kHz 帶寬、96 kHz 采樣率的雙聲道立體聲A/ D,D/ A,音頻輸入包括了*輸入和線路輸入。

  系統(tǒng)的硬件平臺如圖3 所示。

 硬件平臺結構圖

圖3   硬件平臺結構圖

  2. 2   基于DSP 的軟件實現(xiàn)

  基于DSP 的實時處理的實現(xiàn),本文將AIC23 采集到的數(shù)據(jù)先存儲到SDRAM 中,在需要處理的時候利用EDMA 實現(xiàn)Ping Pong 緩沖,將待處理的數(shù)據(jù)分批搬運到片內存儲器,結合高速緩存和片內內存設計合適的數(shù)據(jù)結構,并將數(shù)據(jù)對齊,這樣大大減小了數(shù)據(jù)搬移帶來的開銷。

  DSP 處理主流程圖如圖4 所示。

DSP 處理主流程

圖4  DSP 處理主流程

  基于Ping Po ng 緩沖結構的音頻處理流程如圖5所示。

基于Ping Po ng 緩沖結構的音頻處理流程

圖5   基于Ping Po ng 緩沖結構的音頻處理流程

  通過對音頻處理算法中數(shù)據(jù)結構的調整和優(yōu)化,將Ping Pong 緩沖架構的數(shù)據(jù)進行合理的安排,使得EDMA的數(shù)據(jù)傳輸和Process AEC 線程更好地并行處理。將當前需要處理的*信號和揚聲器信號的數(shù)據(jù)保存在片內地址內,并將回聲消除中用到的FFT 和揚聲器參考數(shù)據(jù)均放在片內地址處理。將算法的其他輔助數(shù)據(jù)結構均放在SDRAM。這使得片內資源得到最大化利用,并且很大程度地提升了整個系統(tǒng)的運算效率。

  參考TI DSP 相關優(yōu)化資料,T I 的編譯器選項使用-mv6700,-O3,-oiO,-pm 開關,使得編譯的代碼能更多地利用TMS320C6713B 的硬件資源和浮點指令,參考了TI 帶的FFT 加速函數(shù),結合實際算法做了局部的改進,使得所有算法最終在TI TMS320C6713B 上均能實時高效的運行。

  3   結  論

  聲學回聲消除以及噪音抑制等算法在多媒體通信的音頻處理中起著至關重要的作用。

  本文通過結合相關的自適應濾波器以及非線程處理和噪音抑制等算法,并在基于TI 的T MS320C6713B上實現(xiàn)和優(yōu)化,實現(xiàn)了高效率的聲學回聲、噪聲消除實時處理系統(tǒng)。通過實際應用表明,該系統(tǒng)對噪音消除可達40 dB以上,對回音消除可達50 dB 以上,并具備良好的雙工處理能力。目前在本系統(tǒng)的基礎上已經延伸擴展出了多路輸入/ 輸出的專業(yè)數(shù)字音頻處理器,并實際應用在視頻會議系統(tǒng)中,取得了較好的體驗效果。


 

此內容為AET網(wǎng)站原創(chuàng),未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
一本色道久久综合亚洲精品不 | 久久精品亚洲精品| 99国产精品99久久久久久粉嫩| 欧美在线日韩精品| 午夜精品影院| 亚洲欧美日韩国产中文在线| 亚洲午夜久久久久久尤物 | 久久麻豆一区二区| 久久久久久黄| 久久精选视频| 久久久久免费观看| 久久影音先锋| 蜜臀av性久久久久蜜臀aⅴ四虎| 久久综合给合久久狠狠狠97色69| 久久精品亚洲| 久久一区二区三区四区| 久久中文字幕一区| 欧美1区2区3区| 欧美黄色精品| 欧美日韩卡一卡二| 欧美性猛交视频| 国产精品社区| 国产日本欧美在线观看| 国产一区二区三区久久精品| 国产亚洲网站| 亚洲二区免费| 日韩视频一区| 亚洲欧美日韩成人| 久久成人免费日本黄色| 亚洲福利电影| 亚洲日本中文字幕区| 日韩亚洲在线| 亚洲欧美变态国产另类| 欧美在线短视频| 久久久精品国产一区二区三区 | 欧美成人一区二区三区| 欧美精品在线免费播放| 欧美午夜一区二区三区免费大片 | 狠狠色综合色综合网络| 亚洲电影中文字幕| 夜夜嗨网站十八久久| 亚洲欧美激情四射在线日| 欧美一区二区三区四区夜夜大片 | 伊人久久婷婷色综合98网| 伊人久久综合| 亚洲欧洲中文日韩久久av乱码| 日韩一级免费| 午夜在线精品偷拍| 亚洲高清一区二区三区| 99视频精品在线| 欧美亚洲一区在线| 蜜臀va亚洲va欧美va天堂| 欧美日韩国产三级| 国产一区美女| 亚洲精品视频二区| 亚洲欧美成人一区二区三区| 亚洲人成网站在线观看播放| 亚洲免费在线视频| 麻豆乱码国产一区二区三区| 欧美三日本三级少妇三2023| 国产亚洲福利社区一区| 亚洲日本免费电影| 午夜精彩国产免费不卡不顿大片| 最新高清无码专区| 亚洲欧美视频在线| 欧美成人在线免费观看| 国产精品视频免费| 最新日韩在线| 欧美在线亚洲综合一区| 亚洲特色特黄| 久久久久国产精品厨房| 欧美日韩国产成人在线| 国产区精品在线观看| 亚洲精品国久久99热| 香蕉久久一区二区不卡无毒影院 | 欧美一区二区三区在线观看| 日韩亚洲精品电影| 久久裸体艺术| 国产精品免费一区豆花| 亚洲人体影院| 亚洲福利免费| 欧美亚洲午夜视频在线观看| 欧美激情一区二区在线 | 9色精品在线| 久久精品国产精品亚洲综合| 午夜影视日本亚洲欧洲精品| 欧美黄色网络| 国产主播一区| 亚洲一区久久久| 一本久道久久综合中文字幕| 美国十次成人| 国产日本欧美一区二区| 在线视频日韩精品| 亚洲美女av黄| 六十路精品视频| 国产日韩欧美亚洲一区| 亚洲视频福利| 99这里只有久久精品视频| 麻豆国产va免费精品高清在线| 国产噜噜噜噜噜久久久久久久久| 99xxxx成人网| 亚洲伦伦在线| 欧美成人tv| 在线看片一区| 久久精品国产久精国产爱| 欧美一区二区三区在线播放| 欧美色大人视频| 亚洲老板91色精品久久| 亚洲片在线资源| 久久影音先锋| 精品va天堂亚洲国产| 欧美亚洲一区在线| 欧美在线精品一区| 国产免费成人| 亚洲欧美久久久| 欧美一二区视频| 国产免费观看久久| 亚洲与欧洲av电影| 亚洲综合色视频| 欧美性色aⅴ视频一区日韩精品| 日韩视频免费大全中文字幕| 一本一本久久| 欧美日韩一区二区三区在线视频 | 久久久久这里只有精品| 国产一区二区三区在线免费观看| 羞羞漫画18久久大片| 欧美在线一二三| 国产一区二区三区观看| 久久都是精品| 麻豆久久久9性大片| 亚洲福利小视频| 日韩视频精品在线| 欧美日韩国产一区二区| 一区二区三区欧美视频| 亚洲女性裸体视频| 国产欧美一区二区精品仙草咪| 性感少妇一区| 久久青青草综合| 亚洲第一黄色网| 一区二区三区日韩精品| 欧美丝袜一区二区三区| 亚洲网站在线看| 欧美在线观看网站| 影音先锋中文字幕一区二区| 亚洲美女在线视频| 欧美日韩一区二区三区在线看| 亚洲天堂网站在线观看视频| 欧美影院一区| 激情久久久久久| 99国产精品私拍| 欧美三级资源在线| 午夜欧美大尺度福利影院在线看| 久久一区二区三区四区| 亚洲三级毛片| 亚洲女ⅴideoshd黑人| 国产日韩欧美在线视频观看| 亚洲国产成人不卡| 欧美伦理91i| 亚洲一区亚洲| 美女精品视频一区| 99re热精品| 久久久久久国产精品一区| 91久久夜色精品国产九色| 亚洲一区二区成人| 国产亚洲欧美一区| 亚洲精品久久久久久久久| 国产精品啊啊啊| 亚洲成人资源网| 欧美视频在线观看免费网址| 午夜亚洲一区| 欧美精品一区二区三区在线播放 | 欧美日韩第一区| 亚洲欧美国产高清va在线播| 久久一日本道色综合久久| 9国产精品视频| 久久久午夜电影| av成人免费在线观看| 久久久久久久激情视频| 亚洲精品影院在线观看| 久久精品国产一区二区电影| 亚洲人屁股眼子交8| 欧美在线亚洲在线| 亚洲精品在线三区| 久久精品国产99国产精品澳门| 91久久精品视频| 久久国产精品久久国产精品| 日韩视频免费大全中文字幕| 久久久久综合网| 中日韩在线视频| 欧美a级在线| 亚洲欧美视频在线观看视频| 欧美精品在线一区二区| 久久国产精彩视频| 国产精品乱子久久久久| 亚洲人成在线观看网站高清| 国产欧美在线看| 宅男精品视频| 亚洲高清av| 久久aⅴ国产紧身牛仔裤| 日韩一区二区精品视频|