《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 雙目視覺在助老助殘機器人定位系統中的應用
雙目視覺在助老助殘機器人定位系統中的應用
2016年微型機與應用第13期
劉圭圭,樊炳輝,王傳江,張凱麗
(山東科技大學 機器人研究中心,山東 青島 266590)
摘要: 為幫助上肢活動不便的老人、殘疾人完成自主進食等行為,開發了一套基于雙目視覺的助老助殘機器人定位系統。通過藍色激光引導實現對雙目相機視野范圍內任意物體的定位。采用多自由度助老助殘機器人和Bumblebee2立體視覺系統構建定位實驗系統,定位誤差在1.2 cm范圍內,滿足對助老助殘機器人定位精度的要求。
Abstract:
Key words :

  劉圭圭,樊炳輝,王傳江,張凱麗

  (山東科技大學 機器人研究中心,山東 青島 266590)

  摘要:為幫助上肢活動不便的老人、殘疾人完成自主進食等行為,開發了一套基于雙目視覺助老助殘機器人定位系統。通過藍色激光引導實現對雙目相機視野范圍內任意物體的定位。采用多自由度助老助殘機器人和Bumblebee2立體視覺系統構建定位實驗系統,定位誤差在1.2 cm范圍內,滿足對助老助殘機器人定位精度的要求。

  關鍵詞:雙目視覺;助老助殘;機器人;定位

0引言

  助老助殘機器人即為幫助那些身體功能缺失或嚴重喪失的老人、殘疾人實現獨立生活的一類機器人。雙目視覺即為通過位于不同視角的兩個相機模擬人類視覺原理,實現對空間中三維物體的定位。雙目視覺已廣泛應用于機器人導航、場景重建、虛擬現實等領域[13]。

  本文簡單介紹了雙目視覺原理,利用多自由度助老助殘機器人和Bumblebee2立體視覺系統構建的定位系統,進行了空間三維定位實驗。

1雙目視覺原理

  本文采用平行光軸雙目視覺,其原理如圖1所示。左右兩臺完全相同的相機精確位于同一平面上,主光線嚴格平行,相對位置固定,主點(clx,cly)和(crx,cry)在左右兩幅圖像上具有相同的像素坐標。T(基線長度)為兩臺相機中心之間的距離。左右相機成像平面坐標系分別為OlXlYl和OrXrYr,雙目相機坐標系為OXYZ。坐標系OXYZ中任一點P(x,y,z)在兩成像平面坐標系中分別對應為點Pl(xl,yl)和點Pr(xr,yr)。點P在兩幅圖像中的y坐標值是一樣的,即yl=yr=ylr。根據三角幾何原理和小孔成像原理可得式(1):

  1.png

001.jpg

  假設d=xl-xr,d稱之為視差(即為同一個空間點在兩幅圖像中位置的偏差),代入式(1)即可計算出點P在相機坐標系下的三維坐標,如式(2):

  2.png

2實驗平臺

  實驗平臺主要包括多自由度助老助殘機器人和Bumblebee2雙目視覺系統兩個部分。整個實驗平臺的硬件結構如圖2所示。

002.jpg

  2.1助老助殘機器人系統

  多自由度助老助殘機器人如圖3所示。結構圖中1、2、3為伺服電機,PC通過USB轉CAN總線的方式對其發送控制命令;4、5為數字舵機,通過USB轉RS485的方式對其施行控制;6為直流電機,通過USB轉RS232與CortexM3底層控制器進行通信,之后由底層控制器對其進行控制操作。機械臂的DH[4]參數模型如表1所示。

 

003.jpg

  2.2雙目視覺系統

  Bumblebee203s2c是Point Grey Research公司的一款立體視覺產品。采用兩個Sony CCD芯片,分辨率為640×480,具有高速1394A接口,全視場深度測量,實時3D數據轉換(3D點100萬像素/s),相機位置偏差和鏡頭畸變可以自動校正,配套有靈活的軟件開發工具。

  Bumblebee2左右兩相機之間的基線長度為12 cm,每個相機的視場角為66°。根據上述兩個參數,可得雙目相機視場范圍。圖4為實測坐標系OXYZ的位姿。

 

004.jpg

  2.3二者之間的位置關系

  圖5為雙目相機坐標系odxdydzd與世界坐標系oxyz之間的位置關系,圖中相機可繞xd軸旋轉(θ)。由圖中幾何關系及坐標變換公式[5]可知,在相機坐標系下的坐標P=[pxpypz1]T,轉換到世界坐標系下的坐標為[153-py×sin(θ)-pz×cos(θ),px+568,pz×sin(θ)-py×cos(θ)-286,1]T。

 

005.jpg

3助老助殘機器人定位實驗

  3.1雙目視覺定位精度實驗

  將Bumblebee2相機固定,在其正前方沿垂直于相機平面的直線移動目標物來測量Z的值,測量范圍為260 mm~1 000 mm,相鄰兩次測量位置間隔為20 mm。同樣的,在Z=750 mm,垂直于Z軸的平面上對X、Y值分別進行測量。為防止偶然誤差的出現,采用同一位置測量10次取平均值的方式來確定測量結果。真實值與測量值(部分)如表2所示,各分量誤差關系曲線如圖6所示。由表2可知,雙目視覺定位誤差在5 mm范圍內。

006.jpg

  3.2助老助殘機器人末端定位精度實驗

  室內環境下,通過鼠標選擇目標物的方式進行了3組實驗,目標位置在相機坐標系、世界坐標系中的坐標以及通過運動學逆向求解[67]獲得的各關節實際坐標,如表3所示。表3中誤差計算公式為:

        3.png

 

  由表3可知,助老助殘機器人末端定位誤差在1.2 cm范圍內,滿足實驗要求。

  3.3實驗效果

 

007.jpg

  實驗過程中通過藍色激光筆的引導來選擇定位目標,通過閾值分割等方法[89]進行數字圖像處理,主動確定激光點所指目標點位置。實驗效果如圖7所示。圖中目標位置在相機坐標系下的坐標(單位:mm)為(-37.21,-17.03,264.33),在世界坐標系下的坐標為(270.41,530.79,-523.43),而手臂末端在世界坐標系下的實際坐標為(262,532,-520),誤差為9.16 mm,滿足實驗精度要求。除此之外,可以通過人嘴部識別[10]

  對嘴部進行定位,還可以通過模板匹配方式來定位某一特定物體。

4結論

  本文應用雙目視覺對助老助殘機器人的操作目標位置進行定位,并對定位精度進行了實驗,精度限定在5 mm范圍內。配合機械臂的運動,末端定位精度在1.2 cm范圍內,滿足實驗要求。但系統仍有需要改進的地方,比如控制器攜帶不方便,激光斑指引方法易受環境光照的影響等。

參考文獻

  [1] 丁良宏,王潤孝,馮華山,等.立體視覺測程研究進展[J].機器人,2011,33(1):119128.

  [2] 李丹程,劉景明,姜琳穎,等.基于柵格模型的雙目移動機器人三維場景重建[J].小型微型計算機系統,2012,33(4):873877.

  [3] 徐宇杰,管會超,張宗衛,等.基于人眼視覺原理的虛擬現實顯示模型[J].計算機應用,2015,35(10):29392944.

  [4] DENAVIT J, HARTENBERG R S. A kinematic notation for lowerpair mechanisms based on matrices[J].Journal of Applied Mechanics ASME Transactons, 1965,22(2): 215221.

  [5] 蔡自興.機器人學(第三版)[M].北京:清華大學出版社,2015.

  [6] 馬漢波,顏鋼鋒.基于DSP和FPGA的多軸運動控制系統設計[J].電子技術應用,2013,39(3):3436.

  [7] 蔡自興.機器人學基礎[M].北京:機械工業出版社,2009.

  [8] KRSTINIC D, SKELIN A K, MILATIC I, et al. Laser spot tracking based on modified circular hough transform and motion pattern analysis[J]. Sensors, 2014, 14(11):2011220133.

  [9] 曹世康,李東堅,許瑞華,等.基于最優弧的激光光斑中心檢測算法[J].紅外與激光工程,2014,43(10):34923496.

  [10] 勒薇,張建奇,張翔.基于局部梯度算子的嘴部檢測與定位[J].光電工程,2009,36(10):135140.


此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
国产在线视频欧美一区二区三区| 日韩一级精品视频在线观看| 欧美日韩日韩| 蜜月aⅴ免费一区二区三区 | 影音先锋亚洲精品| 国内在线观看一区二区三区| 国产日韩欧美二区| 国产伦理精品不卡| 国产精品人成在线观看免费 | 欧美中文字幕在线播放| 午夜精品av| 亚洲欧美日韩成人| 亚洲欧美在线看| 午夜在线成人av| 亚洲免费影院| 性做久久久久久免费观看欧美| 亚洲欧美日韩国产另类专区| 亚洲欧美日韩国产| 欧美在线啊v| 久久久美女艺术照精彩视频福利播放| 久久久久久亚洲综合影院红桃| 久久嫩草精品久久久精品| 久久久久国产一区二区| 久久香蕉国产线看观看网| 久久婷婷国产综合国色天香| 久热爱精品视频线路一| 欧美成人精品不卡视频在线观看| 欧美91视频| 欧美伦理视频网站| 欧美日在线观看| 国产精品麻豆欧美日韩ww | 国产精品女人毛片| 国产网站欧美日韩免费精品在线观看 | 一本一道久久综合狠狠老精东影业| 一区二区高清视频| 亚洲——在线| 久久www成人_看片免费不卡| 久久夜精品va视频免费观看| 欧美69wwwcom| 欧美午夜视频一区二区| 国产日本亚洲高清| 一区二区三区在线免费视频| 亚洲日本久久| 亚洲欧美第一页| 91久久夜色精品国产九色| 99亚洲精品| 午夜国产不卡在线观看视频| 美女国内精品自产拍在线播放| 欧美精品一区二区三区久久久竹菊| 国产精品高潮在线| 狠狠色狠狠色综合日日小说| 亚洲青涩在线| 亚洲欧美日韩另类| 亚洲欧洲日韩综合二区| 亚洲四色影视在线观看| 亚洲综合不卡| 老司机精品导航| 欧美日韩国产小视频| 国产日产高清欧美一区二区三区| 亚洲国产成人在线播放| 亚洲一区二区在线视频 | 亚洲人成欧美中文字幕| 亚洲亚洲精品在线观看| 亚洲欧美日韩精品在线| 亚洲国产片色| 亚洲一区二区在线观看视频| 欧美专区日韩视频| 欧美激情综合色| 国产欧美一区二区三区久久 | 欧美日韩一区国产| 久久综合免费视频影院| 欧美成人综合| 国产精品永久免费视频| 国模私拍视频一区| 一级日韩一区在线观看| 欧美一级视频精品观看| 亚洲天堂av在线免费| 久久一区二区三区国产精品 | 国产日韩欧美视频| 亚洲国产欧美日韩另类综合| 亚洲女优在线| 一区电影在线观看| 久热爱精品视频线路一| 国产精品夜色7777狼人| 日韩视频免费观看高清在线视频 | 午夜亚洲福利| 欧美日韩国产系列| 一区二区三区在线视频播放| 亚洲欧美激情四射在线日| 亚洲视频狠狠| 欧美国产精品| 国产九九精品| 中日韩高清电影网| 99人久久精品视频最新地址| 蜜桃精品久久久久久久免费影院| 国产日韩欧美综合一区| 一区二区三区偷拍| 一本色道久久88亚洲综合88| 久久综合久久美利坚合众国| 国产日韩av高清| 亚洲一区二区影院| 亚洲一区二区免费在线| 欧美精品www| 亚洲国产欧美国产综合一区| 久久国产欧美精品| 久久都是精品| 国产日韩免费| 亚洲视频欧美在线| 亚洲视频在线播放| 欧美日韩国产一区精品一区| 在线免费观看视频一区| 亚洲第一福利在线观看| 久久久精品tv| 国产一区二区三区奇米久涩| 午夜精品在线看| 欧美一区二区三区的| 国产美女精品视频| 亚洲欧美日韩精品久久亚洲区| 亚洲综合色激情五月| 亚洲一区二区三区影院| 欧美日韩小视频| 亚洲另类在线视频| 妖精成人www高清在线观看| 国产热re99久久6国产精品| 国产精品久久网站| 亚洲视频在线看| 亚洲欧洲精品天堂一级 | 麻豆精品精华液| 在线成人av| 久久精品论坛| 欧美成人在线免费视频| 亚洲国产日韩欧美综合久久| 亚洲人成在线观看| 欧美高清在线精品一区| 亚洲国产一区二区a毛片| 日韩午夜在线播放| 欧美日韩在线精品| 亚洲视屏在线播放| 欧美在线视频不卡| 国产亚洲精品美女| 亚洲国产欧美日韩| 欧美久久九九| 亚洲欧洲一区二区三区在线观看| 一区二区日本视频| 欧美日韩精品二区第二页| 99国产精品99久久久久久粉嫩| 亚洲小说春色综合另类电影| 国产精品蜜臀在线观看| 性做久久久久久久久| 老司机午夜免费精品视频| 亚洲国产综合在线| 亚洲视频一二三| 国产日韩一区二区| 亚洲欧洲午夜| 欧美三级在线播放| 亚洲欧美日韩区| 欧美a一区二区| 在线亚洲免费| 久久免费视频在线| 亚洲美女av黄| 欧美一区二区视频网站| 精品白丝av| 99视频精品在线| 欧美特黄一级| 久久精品av麻豆的观看方式| 欧美另类综合| 午夜精品福利一区二区蜜股av| 免费精品99久久国产综合精品| 99热精品在线| 久久亚洲综合色| 一本色道久久| 久久亚洲视频| 一区二区三区久久网| 老鸭窝毛片一区二区三区| 一本久道久久综合婷婷鲸鱼| 欧美在线观看天堂一区二区三区| 伊人婷婷欧美激情| 亚洲美洲欧洲综合国产一区| 日韩一级片网址| 欧美国产国产综合| 最新成人av在线| 国产一区二区三区四区三区四| 9国产精品视频| 国产精品羞羞答答xxdd| 亚洲级视频在线观看免费1级| 国产欧美va欧美不卡在线| 午夜宅男久久久| 一本到12不卡视频在线dvd| 欧美国产日韩在线| 91久久久久久久久| 有坂深雪在线一区| 91久久精品国产91久久| 国产麻豆精品theporn| 亚洲影视在线播放| 亚洲区欧美区| 亚洲精品国产精品乱码不99| 性做久久久久久久久| 亚洲欧洲日本mm| 亚洲午夜一级| 亚洲福利一区|