《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 一種新型人體三維建模系統的設計
一種新型人體三維建模系統的設計
來源:電子技術應用2013年第3期
程 駿1,張 琴1,李海華2
1.廣東技術師范學院,廣東 廣州510665; 2.華南農業大學,廣東 廣州510640
摘要: 設計了一款新型的人體三維建模識別系統。系統采用2片TI TMS320C64x+數字信號處理器組成算法核心單元,采用S3C6410嵌入式處理器實現時序及總線控制功能。該系統無需人體佩戴任何骨骼傳感器網絡,僅通過光學攝像頭及圖像處理算法即可完成人體三維運動建模,并可實現多人體運動目標的實時追蹤功能。給出了該系統的實時多人三維運動建模結果,實測效果良好。
中圖分類號: TP391
文獻標識碼: A
文章編號: 0258-7998(2013)03-0014-03
A new design of the 3D human modeling system
Cheng Jun1,Zhang Qin1,Li Haihua2
1.Guang Dong Polytechnic Normal University, Guangzhou 510665,China; 2.South China Agriculture University, Guangzhou 510640,China
Abstract: A new design of the 3D human modeling & identification system is presented in this paper. Two TI TMS320C64x+digital signal processors are used as the algorithm unit and a S3C6410 embedded processor is used to control the timing sequence and the operation bus. Without any bone sensor networks for the human body, the 3D human modeling can be realized only through the optical cameras and the image processing algorithms. In addition, the traces of multiple real-time human targets can also be pursued in this system. The results of the real-time 3D human modeling experiments are also presented in this paper, which shows a good performance.
Key words : 3D modeling;human body identification;motion tracking;image processing

    人體建模識別技術一直是信號與信息處理領域的研究熱點,在遠程醫療、模式識別、安防監控等各個方面都有著廣泛的應用。但傳統的人體建模識別技術需要被測人體佩戴復雜的關節傳感器網絡,通過高清紅外攝像頭獲取人體運動節點信息,從而實現目標的三維建模。這種方法實施復雜,且價格昂貴。本文設計了一款新型的人體三維建模識別系統,無需人體佩戴特殊的傳感器,僅通過光學攝像頭陣列即可完成人體建模,系統具有高速的視頻處理幀速率,可實現多人體運動目標同時建模的功能,具有廣泛的應用前景。

1 系統體系結構
    實時視頻處理算法涉及到復雜的數學計算,需要消耗大量的處理器資源。為提高效率,本系統將控制器與數據處理器分開,由2片TI TMS320C64x+系列DSP處理器組成數據處理單元,由1片S3C6410 ARM1176JZF-S嵌入式處理器作為核心控制單元,以最大限度地提高DSP處理器的數字信號處理能力。ARM11處理器與DSP處理器之間通過高速同步SPI協議通信。
    光學攝像頭陣列采集的視頻流數據由ARM11處理器按統一的時序實施總線控制,視頻流由高速數據總線輸送給DSP處理器系統,DSP處理器系統負責對視頻流進行編解碼操作并進一步完成三維建模算法。系統總體結構如圖1所示。

 

 

2 系統各功能模塊
2.1 攝像頭采集陣列

    攝像頭陣列由不同類型的攝像頭模塊組成光學采集系統,具體介紹如下:
    (1)紅外發射攝像頭:發射近紅外光譜,當紅外光線投射到三維物體表面時,反射光譜會發生扭曲,扭曲的差值數據會被深度感應攝像頭讀取。
    (2)深度感應攝像頭:分析紅外光譜,按深度重構算法對2D平面圖像進行處理,進而生成3D圖像的深度相對值坐標。
    (3)256色真色彩攝像頭:高速彩色攝像頭,拍攝物體的實時彩色圖像,供處理器獲取原始的流媒體彩色數據。
    (4)平面建模攝像頭:數字濾波攝像頭,負責拍攝物體的邊緣銳化效果圖像,以獲取物體的邊緣輪廓數據,使之作為3D建模的基礎數據之一。
    (5)熱感感應攝像頭:負責拍攝物體的熱感輻射照片,以獲取人體、動物等運動目標數據并與環境背景相區分,使之作為人體運動跟蹤算法的重要基礎數據。
2.2 ARM11處理器系統(S3C6410)
    使用三星S3C6410 ARM1176JZF-S處理器,最高主頻可達667 MHz,它由8級流水線組成,比以前的ARM內核提高了至少40%的吞吐量[1]。在本產品中,ARM11處理器主要作為控制中樞系統,負責完成攝像頭采集陣列的驅動和控制功能,以及對藍牙、USB接口、以太網、RS232等外設的驅動控制功能。
2.3 C64x+ DSP處理器系統
    使用TI公司的高性能DSP處理器TMS320C64x+系列,該系列處理器中的 8 個功能單元可以并行操作,大大地提高了乘法速度,非常適合于視頻、圖像處理等領域的應用[2-3]。在本產品中,共采用2片TMS320C64x+數字信號處理器,負責對實時視頻圖像數據進行編解碼計算,并完成復雜的人體三維建模算法。
2.4 電源管理模塊
    由ARM11處理器實現電源管理的控制功能,實現包括低功耗模式、休眠模式、電壓調節輸出、電流檢測等電源管理功能。
3 算法移植及改進
    傳統上,人體三維建模技術常見的算法主要有曲面建模算法[4]、基于物理特性的建模算法[5]、基于解剖學的分層建模算法[6]和多剛體動力學建模算法[7]。但這些算法并不能很好地滿足實時人體運動目標的建模要求。2011年,Microsoft公司免費公布了Kinect SDK開發包Beta版,該版本針對計算機系統的Windows開源代碼數據包,運用了新一代的動態骨骼追蹤算法。本文對KInect SDK開發包進行了算法移植,將其移植到DSP數字信號處理器,使其可以脫離Windows系統在硬件上獨立運行,并進一步對算法進行了改進,使人體追蹤目標數由原來的1~2人提高到1~4人。
3.1 系統初始化
3.1.1 ARM11系統的初始化

    上電復位后,ARM開始從起始空間執行程序,存放在該地址處的指令為中斷向量表。該中斷向量表共有8條跳轉指令。系統最先執行復位指令,該指令通過修改CPSR更改處理器運行模式。CPSR設置完成后,ARM11系統將進行CPU初始化,CPU初始化主要涉及關閉指令緩存(ICache)和數據緩存 (DCache)等過程。
3.1.2 TMS320C64+ DSP處理器系統初始化
    為適應算法移植的要求,使用DSP/BIOS來初始化DSP系統。DSP/BIOS是TI公司提供的一套初始化代碼接口,它以API和宏的形式封裝了TI公司的所有硬件模塊[8],其初始化過程如下:
    (1)初始化DSP引導程序。DSP/BIOS程序從入口c_int00開始。復位后,復位中斷向量將程序指針自動引導到c_init00。(2)BIOS_init執行基本的模塊初始化,然后調用MOD_init宏分別初始化每個使用的模塊。(3)調用用戶主程序。在完成所有DSP/BIOS模塊的初始化后,硬件中斷和軟件中斷均為使能,此時應用程序可以添加代碼對各種外設進行初始化。最后,調用BIOS_start啟動DSP/BIOS。DSP/BIOS系統啟動流程如圖2所示。

3.2 DSP人體建模算法流程
    攝像頭采集陣列均由ARM11處理器統一總線控制,并通過數據總線將幀圖像數據傳遞給TMS320C64x+ DSP處理器1,由該處理器完成深度圖像處理算法、2D圖像重構算法、2D圖像互補算法,最后可生成單幀人體三維建模圖像,并將數據輸出給TMS320C64x+ DSP處理器2。
    TMS320C64x+ DSP處理器2通過提取256色真色彩攝像頭的流媒體同步數據信息,并運用3D視頻流重構算法,即可實現對單幀人體三維建模圖像的視頻流重構計算,從而生成連續幀結構的人體3D建模數據流,最后運用視頻流媒體壓縮算法,即可輸出完整流暢的人體三維建模結果。DSP雙處理器陣列算法流程如圖3所示。

3.3 算法改進
    原Kinect SDK開源數據包只支持1~2個人體運動目標的捕捉及建模功能。本系統運用迭代算法,計算出第3個及第4個人體運動目標的解析方程,代入攝像頭陣列的采集參數后,即可確定4個動態的人體運動目標的坐標參數,從而完成4個人體運動目標的三維建模。按迭代算法計算,系統理論上可實現12個人體運動學目標的三維建模結果,目前已經實現了1~4個人體運動目標的實時追蹤及三維建模功能。
4 實驗結果及性能分析
    使用該系統分別對1個、2個、3個、4個人體運動學目標進行了實時三維人體建模實驗。結果顯示,在單目標識別時,系統能夠在較快時間內捕獲運動目標,生成初始化建模參考原點,并在2 s內實現人體17節點的三維骨架建模,整體性能良好。同時,多人體運動目標建模實驗也獲得了較好的性能,實測結果如圖4~圖7所示。
    本文提出的人體三維建模系統的實測性能如表1所示。

    經測試,該人體三維建模系統可實現多人體運動目標的實時追蹤及三維建模功能,實測最大人體追蹤目標數為4人,系統初始響應時間低于2 s,二次建模重建時間低于1 s,系統整體上已達到了較好的性能。在單個人體目標三維建模時,系統的各項性能均達到最佳值,隨著人體建模目標個數的增加,系統的響應時間及幀速率等指標均有輕微的下降,這表明隨著人體目標個數的增加,DSP系統處理能力出現了輕微下降,在下一步的研究中需要對算法進行優化改進。 
參考文獻
[1] S3C6410X RISC microprocessor user′s manual,revision1.10[Z].Samsung Electronics Co.Ltd,2008.
[2] TMS320DM642 video/imaging fixed-point digital signal processor data manual[Z].Texas Instruments,2010.
[3] TMS320DM642 evaluation module with TVP video decoders technical reference[Z].Spectrum Digital,Inc.,2004.
[4] GHEORGHE P.Computing with membranes[J].Journal of Computer and System Sciences,2000,61(1):108-143.
[5] GHEORGHT P.P systems with active membranes:Attacking NP complete problems[J].Journal of Automata Languages and Combinatorics,2001,6(1):75-90.
[6] QI Zhengwei,You Jinyuan.Formalization of P systems by Maude[J].Journal of Shanghai Jiaotong University(Science),2005,10(3):260-264.
[7] HANAVAN E P.A Mathematical model of the human body[R].Biomechanics Laboratory,Faculty of Physical Education,University of Calgary,Canada,1984.
[8] 鄭翔,王賢菊,張寒,等.基于DSP/BIOS的VoIP語音通信終端設計[J].軍事通信技術,2012,33(2):89-92.

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
午夜免费日韩视频| 欧美精品一二三| 一区二区三区久久精品| 亚洲高清自拍| 欧美在线视频二区| 亚洲女性喷水在线观看一区| 亚洲乱码国产乱码精品精可以看 | 欧美日韩成人在线视频| 欧美成人官网二区| 欧美成年人网| 欧美激情麻豆| 欧美日本一区| 欧美日韩在线视频一区二区| 欧美日韩视频一区二区| 欧美日韩国产二区| 欧美日韩激情小视频| 欧美日韩精品二区| 国产精品福利在线| 国产精品日韩在线播放| 国产精品一卡| 国产午夜精品在线观看| 国产主播一区二区三区| 国内精品亚洲| 亚洲国产成人久久综合一区| 亚洲激情六月丁香| 亚洲精一区二区三区| 999在线观看精品免费不卡网站| 日韩亚洲欧美一区二区三区| 国产精品99久久久久久白浆小说| 亚洲一区二区精品在线| 性做久久久久久久免费看| 亚洲风情亚aⅴ在线发布| 亚洲黄一区二区三区| 99re热精品| 亚洲欧美国产另类| 久久久女女女女999久久| 欧美aa在线视频| 欧美日韩美女一区二区| 欧美日韩亚洲精品内裤| 国产精品视频一二| 黄色成人片子| 亚洲巨乳在线| 亚洲女同性videos| 亚洲国产精品热久久| av成人免费在线观看| 亚洲欧美日韩中文视频| 快播亚洲色图| 欧美午夜电影一区| 国产午夜亚洲精品理论片色戒| 亚洲电影免费观看高清完整版| 99国产精品国产精品久久| 亚洲字幕一区二区| 亚洲第一精品电影| 亚洲天堂偷拍| 久久精品国产一区二区电影| 欧美激情一区在线| 国产女优一区| 亚洲日本va午夜在线电影| 午夜精品短视频| 日韩视频一区二区三区在线播放免费观看 | 午夜一级久久| 日韩一区二区高清| 欧美一区二区在线观看| 欧美国产欧美亚州国产日韩mv天天看完整| 欧美先锋影音| 1000部精品久久久久久久久| 亚洲深夜福利网站| 亚洲国产日韩欧美一区二区三区| 亚洲一级片在线观看| 久久亚洲欧美国产精品乐播| 国产精品高潮呻吟久久| 在线观看欧美精品| 亚洲图色在线| 亚洲精选成人| 久久精品国产99国产精品| 欧美日韩亚洲视频| 伊人男人综合视频网| 亚洲综合色丁香婷婷六月图片| 亚洲精选国产| 久久综合九色综合欧美狠狠| 国产精品手机在线| 亚洲毛片在线| 亚洲国产精品久久久久久女王| 午夜久久资源| 欧美人在线视频| …久久精品99久久香蕉国产 | 日韩午夜黄色| 久久影视精品| 国产欧美丝祙| 亚洲一区二区三区在线观看视频| 亚洲免费电影在线| 美女黄网久久| 国产综合av| 午夜精品久久久久久久白皮肤| 一本色道久久加勒比精品 | 欧美激情精品久久久久久大尺度| 国产一区二区三区四区三区四| 亚洲一区二区三区视频| 亚洲天堂网在线观看| 欧美人妖另类| 亚洲国产你懂的| 久久精品国产久精国产爱| 久久国产88| 国产精品网站在线播放| av成人动漫| 国产精品99久久久久久久久久久久 | 欧美福利视频在线观看| 一区二区三区在线高清| 欧美在线观看www| 久久精品视频播放| 国产日韩精品在线| 亚洲欧美精品中文字幕在线| 亚洲欧美日本日韩| 国产精品二区在线| 在线视频精品| 亚洲视频在线看| 欧美日韩亚洲高清| 一本一本久久a久久精品综合妖精| 99综合在线| 欧美日韩一区二区三| 夜夜嗨av一区二区三区网站四季av | 一本色道久久综合亚洲精品按摩| 一本色道久久综合一区| 欧美精品午夜视频| 亚洲美女啪啪| 亚洲尤物视频网| 国产精品呻吟| 欧美一区二区三区在线播放| 久久激情综合网| 国产一区二区三区自拍| 亚洲国产成人午夜在线一区| 蜜桃av一区二区三区| 91久久亚洲| 亚洲一区二区免费在线| 国产精品久久国产精品99gif | 国产视频亚洲精品| 久久国产精品一区二区三区| 久久综合伊人| 亚洲黄色av| 亚洲综合精品四区| 国产日韩欧美在线看| 久久精品日产第一区二区| 欧美国产日韩在线观看| 亚洲美女av黄| 亚洲免费在线观看| 国产亚洲在线| 亚洲欧洲日产国产综合网| 欧美日韩精品欧美日韩精品| 亚洲网站啪啪| 久久精品国产在热久久| 伊人精品视频| 一本色道久久综合一区| 国产精品视频大全| 久久精品免费观看| 欧美日本精品一区二区三区| 亚洲视频一二| 久久这里只有| 亚洲精选视频在线| 欧美在线日韩| 在线观看一区| 亚洲午夜女主播在线直播| 国产精品自在欧美一区| 亚洲国产一区二区视频| 欧美日韩一区在线观看视频| 先锋影音网一区二区| 欧美成人午夜| 亚洲一区3d动漫同人无遮挡| 久久综合狠狠综合久久综合88| 亚洲精品日本| 久久国产精品99精品国产| 亚洲黄页视频免费观看| 亚洲免费影视| 亚洲国产精品久久久| 香蕉成人啪国产精品视频综合网| 精品盗摄一区二区三区| 亚洲——在线| 亚洲国产成人精品视频| 亚洲欧美综合精品久久成人| 在线免费高清一区二区三区| 亚洲一区二区三区免费在线观看| 国语自产偷拍精品视频偷| 亚洲婷婷国产精品电影人久久| 狠狠操狠狠色综合网| 亚洲一级高清| 1000部国产精品成人观看| 午夜精品在线视频| 亚洲国产婷婷香蕉久久久久久| 欧美专区在线观看| 亚洲精品视频免费在线观看| 久久嫩草精品久久久久| 在线亚洲欧美| 欧美精品久久久久久久| 欧美一区影院| 国产精品进线69影院| 日韩视频一区二区三区| 极品少妇一区二区| 欧美一区观看| 一区二区欧美日韩视频| 欧美电影免费| 亚洲国产婷婷综合在线精品|