《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 基于SoPC的實時說話人識別控制器
基于SoPC的實時說話人識別控制器
來源:電子技術應用2010年第7期
劉好新,張歆奕
五邑大學 信息工程學院,廣東 江門529020
摘要: 運用軟硬件協(xié)同設計,在DE2-70開發(fā)板上實現(xiàn)了一個基于SoPC的實時說話人識別控制器,控制器有很好的實時性和良好的識別性能。控制器的語音特征參數(shù)采用線性預測倒譜系數(shù)(LPCC),匹配算法采用動態(tài)時間規(guī)整算法(DTW)。
中圖分類號: TP368.1
文獻標識碼: B
文章編號: 0258-7998(2010)07-0024-03
A real-time speaker recognition controller based on SoPC
LIU Hao Xin,ZHANG Xin Yi
School of Information Engineering,Wuyi University,Wuyi 529020,China
Abstract: A real-time speaker recognition controller based on SoPC using DE2-70 development board is discussed in this paper. Since the controller is designed based on hardware and software co-design methodology, it is excellent in real-time processing and good in performance. LPCC is selected as speech features, and dynamic time warping(DTW) algorithm as matching algorithm in this design.
Key words : hardware and software co-design;SoPC;speaker recognition controller;real-time processing

1 算法簡介
    說話人識別系統(tǒng)主要實現(xiàn)建模及識別兩方面功能。建模功能提取語音的特征參數(shù)并存儲起來形成用戶模板。識別功能提取語音的特征參數(shù),與模板參數(shù)進行匹配,計算其距離。系統(tǒng)框圖如圖1所示。本文采用改進的DTW(Dynamic Time Warping)算法和LPCC(Linear prediction cepstrum coefficients)特征參數(shù)。

1.1 LPCC算法
    (1)分幀:語音信號具有短時平穩(wěn)性[1],因此先將其分幀,再逐幀處理。
    (2)有效音檢測:有效音檢測基于短時能量和短時過門限率兩個參數(shù)。判決時采取兩級判斷法:若短時能量高于高門限則判為有聲;若低于低門限則判為靜音;若介于兩者之間,則再判斷其過門限率是否高于過門限率門限,若滿足則判為有聲,否則為靜音。
    (3)加窗:加窗可濾去不需要的頻率分量,同時有利于減少LPCC算法在幀頭及幀尾處的誤差。本設計采用漢明窗,其表達式如下:

1.2 改進的DTW算法
1.2.1 全局約束

    圖2和圖3中,橫軸為測試語音參數(shù),縱軸為模板參數(shù),單位為幀。算法以測試語音為基準逐幀進行。如圖2,傳統(tǒng)的DTW算法中,測試參數(shù)長度無法預知時全局約束便無法確定。圖3為改進后的DTW,可在未知測試參數(shù)長度的情況下進行全局約束,配合幀同步算法,便于算法的實時處理

1.2.2 局部約束
    得到當前距離后便要進行前向路徑搜索。n=1指定與m=1匹配。從n=2開始,每個交叉點(n,m)可能的前向路徑為(n-1,m)、(n-1,m-1)、(n-1,m-2),選出其中最小者作為當前點(n,m)的前向路徑,并將該點的累加距離和加上其當前距離作為當前點的累加距離。最終在n=N處可得到若干個累加距離,選其最小者為最終匹配結果。
1.3 Matlab仿真
1.3.1 實驗1:對個性信息的識別能力

    實驗1的目的在于觀察算法對于話者個性信息的識別能力,實驗用的語音均為各話者對正確詞“開門”的發(fā)音,以避免不同單詞帶來的影響。實驗結果如圖4所示,系統(tǒng)的等錯誤率(EER)為0.01,即當錯識率為0.01時錯拒率也為0.01。

1.3.2 實驗2:對語意信息的識別能力
    實驗2的目的在于觀察識別算法對于語意的識別能力,實驗用的語音均為同一話者對正確詞及錯誤詞的發(fā)音,以避免因不同話者帶來的影響。如圖5所示,在門限為1.25時得到系統(tǒng)的等錯誤率(EER)為0.01。比較實驗1、實驗2的結果可知,算法對語義的識別能力和對話者個性信息的識別能力相近。

1.3.3 實驗3:綜合測試
    實驗3綜合考慮了話者的個性信息及語意信息。如圖6所示,在門限為1.4時,得到系統(tǒng)的等錯誤率為0.01,也即此時系統(tǒng)的正確識別率為99%,同時存在1%的錯誤識別率。

2 SoPC系統(tǒng)構建
    (1)CPU設置。NiosII core選定為NiosII/f。使能嵌入式硬件乘法器。復位地址設為cfi_flash,異常向量地址設定為ssram_2M,在custom instructions中添加用戶自定義指令floating Point Hardware。
    (2)定時器設置。本設計使用了兩個定時器。Timer用于產生內部中斷采集語音樣點,設其計時周期為125 μs(對應采樣率8 kHz)。Timer_stamp用于插入時間標簽,定時周期采用默認值。
    (3)其他外設。NiosII核中還包含以下外設:片上RAM/ROM、FLASH、SDRAM、SSRAM、按鍵、開關、LED、音頻模塊、七段數(shù)碼管、LCD。
3 軟件流程
    總體工作流程如圖7所示。系統(tǒng)首先初始化,然后讀出模板數(shù)據(jù),等待用戶按下按鍵。在此期間,用戶應設置好系統(tǒng)工作模式(建模或識別)及話者代碼。然后按下按鍵開始以中斷方式采集語音,并運行函數(shù)主體。

    識別部分流程如圖8所示。函數(shù)首先判斷語音是否已經(jīng)采集完畢及LPCC算法是否已經(jīng)進行到最后一幀,若同時滿足則結束運算,否則繼續(xù)運行。若當前幀為有效音,則計算出其LPCC,并調用DTW子函數(shù),針對各模板分別計算距離得分。運算完所有語音幀后,便可得到測試語音對各模板的最終得分,取其最大者記為當次得分。若該得分大于得分門限,則識別通過;否則予以拒絕。


    建模部分流程的前半部分與識別過程類似,不同之處在于建模過程只調用了LPCC算法。算法完成后,系統(tǒng)將LPCC矩陣寫入對應的Flash地址空間存儲。
4 軟硬件協(xié)同設計與優(yōu)化
4.1 軟件設計與優(yōu)化

    (1)將數(shù)據(jù)緩存至SDRAM。最初的程序設計中使用數(shù)組存儲大型變量,后來改為將這些數(shù)據(jù)緩存于SDRAM中。改進后,在板運行速度無明顯改變,但NiosII軟件的運行速度及穩(wěn)定性得到了提高。
    (2)用float數(shù)據(jù)類型代替double。最初的程序大量使用了雙精度數(shù)據(jù)類型,但后來發(fā)現(xiàn)單精度浮點型已經(jīng)可以滿足要求,因此將數(shù)據(jù)類型改為單精度浮點型(float),使得程序運行速度提升了一倍。
    (3)用指針方式訪問數(shù)組。改用指針的方式訪問數(shù)組改善了程序的執(zhí)行效率,運行速度有一定提升。
    (4)用讀表法獲取漢明窗函數(shù)。最初的程序是通過運算公式的方式得到窗函數(shù)的各個樣點值的,后改用讀表法,使得加漢明窗這一步驟耗時減少了98.7%,整個LPCC運算耗時因此減少了59.3%。
    (5)語音數(shù)據(jù)存儲為float類型。最初的設計中,系統(tǒng)采集到原始語音數(shù)據(jù)后直接將其存儲起來,后來改為將數(shù)據(jù)解碼后再存儲,使得LPCC中取語音部分的時間由888 μs降至98μs。
4.2 硬件設計與優(yōu)化
    (1)用定時器中斷方式采集語音。最初的設計中,系統(tǒng)必須在采集完所有語音數(shù)據(jù)之后才能對其進行處理。后改用中斷方式采集語音,則可實現(xiàn)每采集滿一幀語音數(shù)據(jù)便進行處理,極大地提升了處理速度。
    (2)添加用戶自定義浮點指令。語音信號處理過程涉及大量單精度浮點型數(shù)據(jù)的運算,因此在CPU中添加浮點指令。加入浮點指令后,系統(tǒng)耗時降低了90%以上。
    本設計在算法上充分利用了DTW算法的特點,既能識別語音內容又能區(qū)分說話人,很好地完成了文本有關的說話人識別功能。同時對識別算法進行幀同步處理,為算法的實時實現(xiàn)打下基礎。本設計在實現(xiàn)時采用軟硬件協(xié)同設計方法,在軟件和硬件上進行設計和優(yōu)化,使得設計有很好的實時性。
    作品的實際測試情況是:選取門限為1.5時,系統(tǒng)的錯識率可降至0%,此時正確識別率為90%,還有10%的拒識。識別時系統(tǒng)的響應時間是8.5 ms。
參考文獻
[1] 趙力.語音信號處理[M].北京:機械工業(yè)出版社,2003.
[2] 馬志欣,王宏,李鑫.語音識別技術綜述[J].昌吉學院學報,2006(3).
[3] 周立功.SoPC嵌入式系統(tǒng)基礎教程[M].北京:北京航空航天大學出版社,2006.
[4] 周鳳偉,劉操.1比特Sigma Delta調制在DSD中的應用[J].廣播與電視技術,2010(1).
[5] 沈佳銘.一種可重構的24bitΣ-Δ調制器的設計[J].微電子學與計算機,2007,24(4).
[6] 石博雅.G.726語音編解碼器在SoPC中的實現(xiàn)[J].電子技術應用,2005(8).
[7] 葛保建.基于SoPC的軟硬件協(xié)同設計平臺的研究與實現(xiàn)[D].武漢科技大學碩士學位論文集,2008(3).

此內容為AET網(wǎng)站原創(chuàng),未經(jīng)授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲欧美在线免费| 午夜亚洲视频| 久久国产夜色精品鲁鲁99| 性色一区二区三区| 亚洲国产精品第一区二区| 欧美视频一区在线观看| 欧美一二三视频| 香蕉久久夜色精品| 亚洲国产视频直播| 国产精品婷婷午夜在线观看| 噜噜噜91成人网| 亚洲第一精品久久忘忧草社区| 国产日韩在线看片| 欧美精品一级| 欧美一区二区性| 亚洲看片网站| 午夜影视日本亚洲欧洲精品| 亚洲精品国产日韩| 国产日韩成人精品| 久久综合狠狠| 亚洲欧美中文日韩在线| 性欧美xxxx大乳国产app| 亚洲国产精品第一区二区| 国产精品人人爽人人做我的可爱| 亚洲主播在线| 亚洲人成亚洲人成在线观看图片| 亚洲国产成人精品久久| 国产欧美亚洲视频| 欧美日韩高清在线一区| 久久久青草青青国产亚洲免观| 亚洲国产精品国自产拍av秋霞| 亚洲国产一成人久久精品| 国产午夜精品久久| 欧美日韩中文另类| 免费在线成人| 久久精品99久久香蕉国产色戒 | 亚洲一级在线观看| 国产亚洲综合精品| 国产精品免费福利| 美女主播精品视频一二三四| 欧美一区二区三区在线观看视频 | 国产伦精品一区二区三区照片91 | 久久精品99国产精品酒店日本| 欧美中文字幕视频在线观看| 亚洲一级免费视频| 国产一区二区三区不卡在线观看 | 欧美大片在线看免费观看| 久久爱www久久做| 最新亚洲一区| 亚洲国产精品第一区二区| 亚洲欧美高清| 亚洲视频在线视频| 亚洲乱码日产精品bd| 亚洲黄色性网站| 在线日本成人| 在线精品亚洲一区二区| 激情欧美一区二区三区在线观看| 欧美日韩中文字幕| 欧美日韩色一区| 欧美日韩国产一区二区| 欧美日韩不卡一区| 欧美日韩国产va另类| 欧美激情久久久久| 欧美国产日韩a欧美在线观看| 午夜视频在线观看一区二区三区 | 亚洲香蕉网站| 99热在线精品观看| 狠狠色噜噜狠狠狠狠色吗综合| 欧美日韩一级大片网址| 欧美视频福利| 欧美午夜精品理论片a级按摩| 麻豆国产va免费精品高清在线| 欧美亚洲自偷自偷| 久久国产精品久久精品国产| 欧美中日韩免费视频| 久久国产一二区| 久久精品中文字幕免费mv| 中文高清一区| 亚洲永久在线| 亚洲男人天堂2024| 午夜亚洲性色福利视频| 亚洲欧美视频在线| 欧美在线观看网站| 久久久久久久一区二区| 久久综合伊人77777麻豆| 老鸭窝91久久精品色噜噜导演| 午夜视频一区二区| 久久久精彩视频| 欧美亚洲综合网| 久久视频一区二区| 欧美电影电视剧在线观看| 欧美另类视频在线| 欧美国产日韩亚洲一区| 亚洲另类在线视频| 国产一区二区精品久久91| 国产一区二区黄| ●精品国产综合乱码久久久久 | 欧美电影专区| 欧美日韩免费观看中文| 欧美午夜精品电影| 国产精品一区=区| 国内一区二区在线视频观看| 亚洲高清成人| 在线亚洲精品| 欧美一区二区三区在线播放| 91久久久久久| 亚洲女爱视频在线| 久久色在线观看| 欧美日本一区| 欧美日韩国产在线播放| 国产伦精品一区二区三区| 一区在线免费观看| 一区二区三区精品| 久久激情综合| 中文在线不卡| 久久久久五月天| 欧美日韩在线一区二区三区| 国产欧美精品一区二区三区介绍| 国产精品色午夜在线观看| …久久精品99久久香蕉国产| 亚洲大片在线| 亚洲资源av| 香蕉av777xxx色综合一区| 亚洲美女视频| 久久不射电影网| 欧美久久久久久久久久| 欧美日韩1080p| 国产一区二区日韩| 精品1区2区3区4区| 亚洲午夜激情网页| 亚洲精品乱码久久久久久久久| 99精品久久久| 久久午夜国产精品| 国产精品久久久久久久电影 | 欧美大胆成人| 国产欧美精品一区二区三区介绍 | 欧美精品一区二区三区蜜桃| 国产精品日日摸夜夜摸av| 亚洲成人在线网| 亚洲欧美日韩中文播放| 妖精视频成人观看www| 亚洲欧美影院| 欧美日韩成人一区二区| 国内精品久久久久久久影视麻豆 | 狠狠色丁香婷婷综合影院| 亚洲一区二区三区激情| 亚洲毛片在线观看.| 久久久久久久波多野高潮日日| 免费一级欧美片在线播放| 欧美性感一类影片在线播放| 亚洲国产专区校园欧美| 亚洲大胆女人| 久久久久久久欧美精品| 国产欧美日韩中文字幕在线| aa级大片欧美三级| 亚洲久久一区二区| 免费日韩av| 狠狠入ady亚洲精品经典电影| 亚洲精品视频一区二区三区| 亚洲国产欧美另类丝袜| 久久精品亚洲精品国产欧美kt∨| 欧美激情中文字幕一区二区| 在线不卡a资源高清| 性欧美在线看片a免费观看| 午夜亚洲视频| 国产精品视频免费在线观看| 9i看片成人免费高清| 99精品国产99久久久久久福利| 欧美一区二粉嫩精品国产一线天| 免费观看欧美在线视频的网站| 国产精品国产自产拍高清av| 亚洲精品一区二| 亚洲免费久久| 欧美精品1区2区| 亚洲精品麻豆| 一区二区高清在线观看| 欧美精品午夜| 日韩一级精品| 亚洲视频中文字幕| 欧美视频在线观看| 中文亚洲免费| 亚洲欧美国产77777| 国产精品久久久久av免费| 一级日韩一区在线观看| 亚洲与欧洲av电影| 国产精品久久精品日日| 亚洲香蕉在线观看| 欧美一区二区成人| 国产亚洲福利一区| 欧美在线一级视频| 六月丁香综合| 亚洲精品久久| 亚洲无玛一区| 国产精品美女主播| 亚洲欧美日韩在线一区| 久久亚洲视频| 91久久国产综合久久| 亚洲色诱最新| 国产精品亚发布| 欧美专区18|