《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 一種基于腦機接口的頭盔顯示/瞄準系統設計
一種基于腦機接口的頭盔顯示/瞄準系統設計
2015年電子技術應用第5期
王 寧,孫廣金,劉學文
中國電子科技集團公司第二十七研究所,河南 鄭州450047
摘要: 傳統的頭盔顯示/瞄準系統通過頭盔瞄準具將傳感器耦合到頭盔瞄準線,由傳感器產生的圖像通過頭盔顯示器顯示給觀察者,從而形成閉環系統。提出了一種基于腦機接口的頭盔顯示/瞄準系統設計,并給出了系統的工作流程與算法設計。仿真表明,該系統具有較高的目標識別準確率、較快的系統響應速度以及良好的人機交互體驗,具備深入研究的價值。
中圖分類號: TP391
文獻標識碼: A
文章編號: 0258-7998(2015)05-0149-03
Design of an HMDASS based on BCI
Wang Ning,Sun Guangjin,Liu Xuewen
The 27th Research Institute of China Electronics Technology Group Corporation,Zhengzhou 450047,China
Abstract: The traditional helmet mounted display and sight system(HMDASS) uses targeting tool coupling sensors to line of sight. Images from the sensors are showed to observers with monitor of the helmet. Accordingly a closed-loop system comes into being. This paper puts forward the design of an HMDASS based on brain-computer interface(BCI). Meanwhile the workflow and algorithm design of the system are given. The simulation indicates that the system has high target recognition accuracy, fast system response speed and good interactive experience. Thus the system has the value of in-depth study.
Key words : BCI;HMDASS;SSVEP;MOVEP

    

0 引言

    傳統的頭盔顯示/瞄準系統(Helmet Mounted Display and Sight System,HMDASS)是指頭盔顯示器和頭盔瞄準具組合起來的系統,它既具有頭盔顯示器的功能,可以顯示筆劃字符和光柵圖像,也具有頭盔瞄準具的功能,可以測量和計算頭盔瞄準線的位置[1]。頭盔瞄準具確定頭盔瞄準線,用頭盔瞄準具產生的信號驅動在系統中使用的傳感器,以使它指向頭盔同一方向。來自傳感器的圖像顯示在頭盔顯示器上。這樣,通過頭盔瞄準具將傳感器耦合到頭盔瞄準線,由傳感器產生的圖像通過頭盔顯示器顯示給觀察者,從而形成閉環系統。

    然而在現代戰爭中,軍事武器的機動性越來越強,單純靠目視來鎖定目標越來越困難,并且需要大量的計算機運算來提供精度的保證,而事實上,使用者本身的誤差使得系統精度很難高于5 mrad(RMS)。

    頭盔顯示/瞄準系統究其根本是一個人-機交互的系統,當前的頭盔顯示/瞄準系統已經發展到“所見即所得”的程度,為了更進一步提高系統性能,實現人機同感、人機合一、人在回路中,“所思即所得”的人-機智能交互系統,本文設計了一種基于腦機接口(Brain-Computer Interface,BCI)[2]的頭盔顯示/瞄準系統。

    在這個BCI系統中采集了多種EEG信號,使用穩態視覺誘發電位(Steady State Visual Evoked Potential,SSVEP)來快速選擇打擊目標,使用運動準備視覺誘發電位(Motion Onset Visual Evoked Potential,MOVEP)進行任務分類,使用異步運動想象(Motion Image,MI)[3]作為開關,實現自如的EEG與傳統控制方式的轉換。實驗驗證,該系統具有較好的效果。

1 一種基于腦機接口的頭盔顯示/瞄準系統設計

    針對腦電信息獲取與解析的腦機接口技術研究是人機協同控制的發展趨勢,基于腦機接口的頭盔顯示/瞄準系統設計的目標旨在初步實現人機同感、人機合一、人在回路中,“所思即所得”的人-機智能交互系統[4]

    其中多模態BCI在線控制系統以單人多模態人機融合技術為基礎,以識別結果和時序為優化條件,設計具有自主更新的任務分配范式,通過構建具有高效的自適應腦電信號處理算法以及實現快速有效的意識指令編碼及通信,實現人機智能融合[5]。該系統工作流程為:通過腦電放大器采集及記錄多模態腦電信號;將原始腦電信號進行信號預處理;使用異步MI腦電信號來識別任務狀態;根據任務識別結果判斷信號類型屬于指令編碼還是目標編碼;針對目標編碼和指令編碼,使用SSVEP及MOVEP腦電信號對應的特征提取及分類識別算法;將分類識別結果轉化為指令編碼或者目標編碼,指令編碼可以對應飛機各操作指令,目標編碼對應雷達鎖定目標選擇。系統工作流程如圖 1所示。

jsj2-t1.gif

    (1)多模態腦電信號采集及記錄

    實驗采用美國Neuroscan公司生產的64導EEG采集分析系統進行實驗設計和EEG信號采集。該系統包括用于采集EEG信號的Quik-cap電極帽、SynAmps2專用EEG信號放大器,該采集系統的精度較高。

    (2)信號預處理

    由于腦電信號具有非線性、非平穩性且易受干擾的特點,單純采用ICA分解得到的IC在排序上具有不確定性、運算速度較低等因素,故采取偽跡識別與ICA相結合的預處理算法。

    算法的基本思想:記錄各被試主動眼動的信號,選取有代表性的眼動信號的空間分布作為先驗知識;求ICA分解出的各個獨立成分的空間分布與先驗知識中眼動的空間分布的相關系數,把相關系數大于一定閾值的認定為眼電偽跡;再將這些眼電偽跡成分予以去除,將得到沒有偽跡的數據。

    (3)使用異步MI腦電信號識別任務狀態

    μ、β節律的ERD現象是目前運動想象分類算法設計中最主要的特征之一,其基本原理是人在進行運動或者想像運動時,會導致相應運動皮層功能區EEG信號中μ(8~14 Hz)、β(18~30 Hz)頻段能量的下降。當停止運動或者想象運動時,上述頻段能量則會恢復。這種頻域能量的變化一般稱為事件相關同步與去同步現象(Event-Related Desynchronization/Synchronization,ERD/ERS)。根據這一原理,通過設計合理的空域濾波器進行μ、β節律的ERD特征提取與分類,以及通過在線頻譜能量估計進行μ和β節律頻段優化選擇,實現兩類運動想像任務的在線異步檢測,可以識別兩種任務狀態。

    被試執行運動任務時的大腦活動分布如圖 2所示。

jsj2-t2.gif

    圖2中A為右手實際運動,B為右手運動想像,C為被試休息(實線)與想象(虛線)條件下的電壓頻譜,D為對應的r2頻譜。

    (4)使用SSVEP來快速選擇打擊目標,使用MOVEP進行任務分類

    SSVEP具有明顯的周期性特征,給受試者提供一個特定頻率的視覺刺激時,將在視皮層誘發出頻率跟隨特性的SSVEP信號,因此在枕區記錄到的腦電信號的功率譜將在刺激頻率處出現明顯的譜峰。試驗研究發現,SSVEP頻譜包含有一系列與刺激頻率成整數倍關系的頻率成分,其中以基頻和二倍頻成分最為顯著,并可由此設計基于SSVEP的目標選擇原型范式。系統提供給受試代表不同意義的以不同頻率閃爍的多個方塊圖形,并通過腦電信號頻率的檢測來確定注視目標的選擇。

    典型的Motion-onset VEP信號包含3個主要的信號特征:P1、N2、P2。N2主要出現在60 ms~200 ms,是很顯著的信號特征,產生于顳枕區并與頂葉皮層區域相關。P2主要出現在240 ms左右,其強度隨著視覺運動刺激的復雜程度的上升而上升。

    當被操控人員注視著目標模塊時,模塊內的可視目標的短暫運動會誘發出MOVEP信號,其是與該動作的開始相鎖定關聯的,其信號幅值遠大于周圍其他模塊信號。因此,EEG數據段里包含有與所選目標的動作起始時刻鎖定的MOVEP信號,其具有顯著的動作相關VEP特征。通過VEP特征能夠找到操控者在當前狀態下所注視的任務模塊,從而確定目標,給出結果。

2 系統實驗與結果

2.1 系統實驗

2.1.1 SSVEP

    實驗流程如下:操控者坐于監視器前1.2 m處,頭戴實時EEG電極帽進行EEG數據采集。監視器顯示一組頻率刺激圖像,實驗開始后,各頻率塊以不同的頻率閃爍,同時要求操控者在一個實驗中集中注意力觀察自己選擇的目標框。

    由于個體的差異,在進行基于SSVEP-BCI系統設計之前,需要對操控者進行刺激頻率的選擇。由于在頻率域上每個操控者可用的頻率并不是太多,為了實現多任務的操控目的,在實驗中采用多頻序列編碼范式,其利用頻率在時間尺度上的置換完成對SSVEP-BCI系統刺激模塊的編碼,是一種周期性的直接編碼方案[6]

    多頻序列編碼原理如圖 3所示。

jsj2-t3.gif

2.1.2 MOVEP

    MOVEP的刺激形式如圖4所示,4號位的一條線從方框右邊向左邊快速移動,在本系統中,線從右到左的移動時間是250 ms。若被試注意線起始出現的時刻,那么在后頂部位的電極處便可記錄到MOVEP特征信號。

jsj2-t4.gif

    由于被試間的N200和P200的潛伏期存在差異,為了優化系統的性能,根據雙樣本t檢驗和ANOVA方法為每個被試選取最優的時間窗。在優化后的時間窗內,按一定的降采樣率提取特征點。

    MOVEP時域信號特征如圖5所示。

jsj2-t5.gif

    圖5是從P3電極處采集的EEG信號經過疊加平均后的信號特征圖,其中實線代表目標刺激的EEG信號,虛線代表非目標刺激的EEG信號。

2.2 實驗結果

    通過實驗驗證SSVEP-BCI系統目前達到的技術指標為:(1)能實現對屏幕上同時出現的6種目標進行區分選擇;(2)控制精確度大于80%;(3)鎖定時間約500 ms。

    MOVEP-BCI系統目前達到的技術指標為:(1)能實現對屏幕上同時出現的6種任務進行區分選擇;(2)控制精確度大于80%;(3)任務選擇時間約500 ms。

3 小結

    本文使用SSVEP來快速選擇打擊目標,使用MOVEP進行任務分類,使用異步MI作為開關,實現自如的EEG與傳統控制方式的轉換,取代單純靠目視來鎖定目標的傳統頭盔。經過實驗驗證,該系統通過和機載火控雷達及專業任務系統的緊密配合,在對超高速、小型目標的快速鎖定及腦控任務選擇上具有較好的效果。

參考文獻

[1] 王永年.頭盔顯示/瞄準系統[M].北京:國防工業出版社,1994.

[2] VIDAL J.Toward direct brain-computer communication[J].Annual Review of Biophysics and Bioengineering,1973,2(1):157-180.

[3] WOLPAW J R,BIRBAUMER N,MCFARLAND D J,et al.Brain-computer interfaces for communication and control[J].Clin Neurophysiol,2002,113(6):767-791.

[4] 堯德中.腦功能探測的電學理論與方法[M].北京:科學出版社,2003.

[5] 堯德中,劉鐵軍,雷旭,等.基于腦電的腦-機接口: 關鍵技術和應用前景[J].電子科技大學學報,2009,38(5):550-554.

[6] 吳正華.穩態視覺誘發電位在腦機接口及認知過程中的應用研究[D].成都:電子科技大學,2008.

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
久久综合久久综合这里只有精品| 亚洲伊人久久综合| 亚洲精品一二区| 亚洲激情视频在线播放| 在线观看欧美成人| 激情综合网址| 黄页网站一区| 红桃视频国产一区| 国语自产精品视频在线看| 国产字幕视频一区二区| 国产一区二区高清不卡| 国产日本欧美在线观看| 国产日韩欧美视频| 国产亚洲欧美另类中文| 国产欧美日韩精品丝袜高跟鞋| 国产欧美精品一区二区三区介绍| 国产精品在线看| 国产亚洲精品久久飘花| 国产一区美女| 一区二区三区在线免费观看| 曰韩精品一区二区| 亚洲二区在线观看| 91久久国产综合久久| 日韩图片一区| 一道本一区二区| 一区二区三区四区五区精品| 亚洲一本大道在线| 欧美一级午夜免费电影| 久久精品视频在线免费观看| 亚洲级视频在线观看免费1级| 亚洲人被黑人高潮完整版| 亚洲国产精品激情在线观看| 亚洲精品在线三区| 中日韩高清电影网| 午夜国产不卡在线观看视频| 久久国产精品99国产精| 你懂的成人av| 欧美特黄a级高清免费大片a级| 国产精品日韩| 国内免费精品永久在线视频| 亚洲国产mv| 在线亚洲精品| 欧美一区二区三区喷汁尤物| 最新成人av在线| 亚洲一区二区日本| 欧美专区18| 欧美肥婆在线| 国产精品日韩精品| 影音先锋日韩资源| 一本色道久久综合狠狠躁篇的优点 | 亚洲国产成人av好男人在线观看| 亚洲精品欧美日韩专区| 亚洲欧美另类在线| 快射av在线播放一区| 欧美日韩四区| 国产一区二区日韩精品| 亚洲乱码国产乱码精品精| 亚洲一区二区三区在线播放| 久久国产精品一区二区三区| 亚洲视频1区2区| 久久免费黄色| 国产精品第一页第二页第三页| 黄色精品免费| 亚洲一区二区免费看| 91久久精品国产| 欧美一区二区日韩| 欧美精品一区三区| 国产中文一区| 亚洲一区999| 亚洲人成在线播放网站岛国| 性做久久久久久| 欧美美女喷水视频| 激情综合久久| 亚洲男人的天堂在线| 99re8这里有精品热视频免费 | 亚洲国产精品久久久久秋霞蜜臀| 亚洲一区二区三区四区中文 | 亚洲一区二区三区精品在线观看| 91久久久久久久久久久久久| 欧美一区二区在线免费观看| 欧美精品在线播放| 一区二区三区自拍| 欧美亚洲一区| 亚洲欧美成人| 欧美日韩另类字幕中文| 影音先锋亚洲精品| 亚洲欧美在线一区二区| 亚洲天堂网在线观看| 欧美激情第10页| 伊人久久综合97精品| 香蕉亚洲视频| 午夜一区二区三区在线观看 | 国产精品www网站| 亚洲欧洲日产国码二区| 亚洲国产精品va在线观看黑人 | 久久综合国产精品台湾中文娱乐网| 国产精品美女一区二区| 夜夜嗨av一区二区三区中文字幕| 最新亚洲激情| 久久久久国色av免费观看性色| 国产精品九九| av不卡在线| 一本一本久久a久久精品牛牛影视| 免费在线国产精品| **网站欧美大片在线观看| 久久成人羞羞网站| 久久av红桃一区二区小说| 国产精品羞羞答答xxdd| 亚洲色图自拍| 中文亚洲欧美| 欧美性猛交xxxx乱大交蜜桃 | 国产麻豆成人精品| 亚洲综合清纯丝袜自拍| 亚洲在线中文字幕| 欧美特黄一级| 亚洲色在线视频| 亚洲免费在线精品一区| 国产精品地址| 国产精品99久久99久久久二8 | 一区二区视频免费在线观看| 欧美在线欧美在线| 久久婷婷丁香| 韩国精品主播一区二区在线观看| 欧美一级视频精品观看| 久久精品99国产精品日本| 国产一区二区av| 久久精品国产久精国产爱| 老司机亚洲精品| 最近看过的日韩成人| 99精品欧美一区二区三区 | 激情久久五月天| 亚洲国产成人tv| 欧美成人日韩| 99亚洲一区二区| 亚洲欧美激情四射在线日 | 久久精品人人爽| 精品成人在线视频| 亚洲日本成人在线观看| 欧美日韩国产精品一区| 宅男66日本亚洲欧美视频| 欧美一级淫片播放口| 国产丝袜一区二区三区| 久久精品人人做人人爽| 欧美黄色片免费观看| 99成人精品| 久久国产精品一区二区三区四区| 好吊一区二区三区| 亚洲另类一区二区| 欧美色视频在线| 香蕉久久国产| 欧美成年人视频网站| 亚洲精品一品区二品区三品区| 亚洲影院色无极综合| 国产一区日韩二区欧美三区| 亚洲国产婷婷香蕉久久久久久| 欧美日韩视频在线第一区| 亚洲男人的天堂在线| 浪潮色综合久久天堂| 亚洲欧洲综合| 亚洲免费视频网站| 狠狠爱综合网| 一区二区三区你懂的| 国产精品一区在线观看你懂的| 久久都是精品| 欧美三级视频在线播放| 欧美在线亚洲一区| 欧美日韩免费观看一区二区三区 | 欧美在线视频日韩| 欧美日韩在线播放| 久久精品国产99精品国产亚洲性色| 欧美精品播放| 欧美一区二区免费| 欧美日韩成人综合在线一区二区 | 蜜臀av性久久久久蜜臀aⅴ| 99精品国产一区二区青青牛奶| 久久精品国产一区二区电影| 亚洲乱码国产乱码精品精| 久久精品99| 夜夜嗨av一区二区三区网站四季av| 久久漫画官网| 一区二区三区黄色| 嫩草国产精品入口| 午夜精品婷婷| 欧美日韩综合久久| 亚洲欧洲精品成人久久奇米网| 国产精品美女久久| 99国产精品视频免费观看| 国产无一区二区| 亚洲一区二区三区四区中文 | 久久国产黑丝| 国产精品九色蝌蚪自拍| 亚洲精品乱码久久久久久按摩观| 国产免费观看久久| 中文国产一区| 亚洲国产精品123| 久久久久久久综合色一本| 亚洲一区二区三区乱码aⅴ| 欧美啪啪成人vr| 亚洲国产高清自拍| 国产小视频国产精品|