《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 設計應用 > 多攝像頭視頻采集系統中攝像頭 切換方案的設計與實現
多攝像頭視頻采集系統中攝像頭 切換方案的設計與實現
陳 斌1,2,彭 宏1,2
(1.浙江工業大學 信息工程學院,浙江 杭州 310023; 2.浙江省通信網技術應用研究重點實驗室,浙江 杭州 310023)
摘要: 目前使用的圖像傳感器主要有CMOS和CCD兩類。CMOS器件功耗低、集成度高,但成像質量不如CCD器件好。因此該多攝像頭視頻采集系統采用了CCD和CMOS兩種器件,以滿足多種需求。提出了一種基于TI公司TMS320DM365處理芯片、采用CCD和CMOS器件的攝像頭軟硬件切換設計方案。
Abstract:
Key words :

  摘  要: 目前使用的圖像傳感器主要有CMOS和CCD兩類。CMOS器件功耗低、集成度高,但成像質量不如CCD器件好。因此該多攝像頭視頻采集系統采用了CCD和CMOS兩種器件,以滿足多種需求。提出了一種基于TI公司TMS320DM365處理芯片、采用CCD和CMOS器件的攝像頭軟硬件切換設計方案。

  關鍵詞: 視頻采集;TMS320DM365;攝像頭切換

  0 引言

  近年來,隨著移動終端的快速發展,計算能力增強,移動網絡傳輸速度大幅提高,移動視頻監控技術發展迅速。目前國內外視頻監控業務主要應用在公共領域、行業用戶和個人用戶。特別是在公共場所,國外設置了眾多監控設備,以加強對公共領域安全的控制能力[1]。嵌入式視頻采集系統具有高效、體積小、實時穩定、低成本等優點[2],自然而然地成為了視頻監控設備的良好載體。

  目前使用的圖像傳感器有CMOS(互補金屬氧化物半導體)和CCD(電荷耦合器件)兩類。與CCD相比,CMOS器件具有功耗低、集成度高等優點,但是在噪點和成像質量方面不如CCD器件[3]。而CCD器件則剛好相反。所以在本設計中,采用了CCD與CMOS搭配的設計。其中CCD器件搭配TVP5151視頻解碼芯片,外置的CCD攝像頭能夠提供更靈活、更清晰的視頻圖像。CMOS則是采用了OV5640的模組,利用其集成度高、體積小的特點,作為內置的視頻采集攝像頭,滿足視頻聊天等一般成像需求。

1 硬件框架設計

  整個視頻采集系統終端以TMS320DM365芯片作為處理器芯片,基本模塊有DDR2、SDRAM、NAND Flash、網口、串口以及負責進行信令和視頻數據傳輸的3G模塊等。TI公司的基于DaVinci技術的TMS320DM365芯片,集成了一顆ARM926EJ-S內核,一個圖像處理子系統(VPSS),一個H.264高清編碼器協處理器HDVICP和一個MPEG-4/JPEG高清編碼器協處理器MJCP,支持多格式編解碼[4],所以特別適用于圖像處理。視頻采集部分主要由DM365的VPFE(視頻處理前端)、一個多路轉換器和兩個視頻數據采集芯片(OV5640和TVP5151)組成。攝像頭硬件切換由DM365的GPIO口對多路轉換器進行控制,選擇輸入到VPFE的數據源。

  系統硬件框架設計圖如圖1所示。

001.jpg

  DM365的VPFE采集驅動是一個V4L2設備驅動,可以對RGB和YUV數據進行采集。VPFE的簡單框架如圖2所示[5]。

002.jpg

  視頻采集前端在接收到原始的YUV視頻數據后,可以對數據進行存儲,同時又將視頻數據通過內部的數據總線傳輸到圖像處理模塊。此時可對圖像數據進行裁剪、縮放等,以適應本地存儲或者網絡上傳的需求。

  視頻采集前端在接收到原始的YUV視頻數據后,可以對數據進行存儲,同時又將視頻數據通過內部的數據總線傳輸到圖像處理模塊。此時可對圖像數據進行裁剪、縮放等,以適應本地存儲或者是網絡上傳的需求。

2 軟件設計

  2.1 VPFE模塊驅動

  TMS320DM365數字多媒體芯片包含一個視頻處理模塊用來處理視頻數據,減輕主處理器的負擔。它支持大多數主流的外置視頻采集設備。而與外置視頻采集設備直接相連的就是視頻處理前端子系統(VPFE)。

  VPFE采集驅動通過標準的V4L2接口將底層硬件的功能暴露給了上層應用程序,在應用程序和設備驅動之間建立起了橋梁[6]。VPFE驅動初始化開始后,首先通過imp_get_hw_if()函數和ccdc_get_hw_interface()函數綁定imp和CCDC的接口函數組,隨后對CCDC模塊進行初始化。初始化CCDC模塊之后,驅動會分配需要的內存用來存儲采集上來的視頻數據。最后,便是調用driver_register(&vpfe_driver)函數和platform_device_register(&_vpfe_device)函數注冊驅動和平臺設備。系統啟動時,檢測到其驅動和設備都存在后,就會調用vpfe_prob()函數,這個函數做的最重要的事情就是調用video_register_device()函數綁定了file_operations結構體,提供給應用程序訪問內核與設備驅動的接口。同時生成一個設備文件節點(/dev/Video0),這樣,應用程序就能通過訪問/dev/Video0設備文件節點,配合Ioctl函數調用VPFE驅動中file_operations結構體成員函數來進行視頻的采集。

003.jpg

  VPFE初始化流程圖如圖3所示。在此設計中采用了兩種視頻采集芯片,分別為德州儀器的TVP5151和豪威科技的OV5640。這兩種芯片的驅動程序中,在完成標準的I2C設備注冊的工作后,都會調用vpif_register_decoder(&ov5640_dev[i])或是vpif_register_decoder(&TVP5151 _dev[i])函數將采集芯片的各種操作函數接口封裝成一個struct decoder_device結構體注冊到前面提到的VPFE模塊中。這樣,應用程序就可以通過VPFE的設備文件節點(/dev/Video0)來調用VPFE的操作函數,進而再間接地調用采集設備的操作函數,完成視頻采集芯片的配置工作,使得其能夠正常工作。

  2.2 攝像頭軟切換

  此設計中使用了兩種視頻采集芯片TVP5151與OV5640,因此會有兩個decoder_device結構體注冊到VPFE模塊中。攝像頭的軟切換,也就是對VPFE模塊中注冊的decodor_device結構體進行重新選擇,決定該調用哪個采集芯片,并對CCDC模塊進行相應的配置。于此同時,對多路選擇器也要進行相應的配置,使其選擇正確的通路。攝像頭切換流程如圖4所示。

004.jpg

  首先自然是通過3個GPIO口來配置多路選擇器選擇正確的通路,使得DM365可以獲取到來自正確的采集芯片的視頻數據。VIDIOC_ENUMINPUT命令會通過VPFE模塊調用到注冊到VPFE模塊中的采集芯片驅動的操作函數enuminput,從而依次檢索注冊到VPFE中的各個decoder_device結構體中是否有需要的input_info,并返回對應的decoder_device的序號。所以只需要在調用VIDIOC_ENUMINPUT命令時傳入與所需要采集芯片驅動中相同的input類型,便可以找到對應的decoder_device,從而切換到對應的攝像頭。得到正確的decoder_device序號后,即可用VIDIOC_S_INPUT命令,調用到采集芯片驅動中的initialize函數,完成其初始化。

  切換到正確的視頻數據源以后,還要對CCDC模塊進行對應的設置。這時需要調用命令VIDIOC_S_STD:ioctl(fd,VIDIOC_S_STD,&std),它會調用到視頻采集芯片驅動中的setstd函數,進而對驅動中的struct v4l2_standard結構體數組進行便利,找到其中數據成員ID與VIDIOC_S_STD命令傳入參數std相同的項,返回其name成員,并將其作為ccdc_hw_if->setstd()函數的參數執行,便可以對CCDC模塊的分辨率、幀率等信息進行設置。例如,當檢索到的name值為“VGA-30”時,CCDC模塊分辨率便會被設置成640×480,幀率為30 FPS。

  2.3 掃描方式的切換

  此設計方案中用到的兩種視頻采集芯片的掃描方式是不同的。TVP5151是隔行掃描,一幀分為奇偶兩場,而OV5640是逐行掃描。VPFE模塊對于這兩種掃描方式的處理方式是不同的,所以完成攝像頭的切換后,還要把CCDC模塊掃描方式設定成與對應的視頻采集芯片一致。在VPFE驅動中,有一個標志位frame_format就是用來表示掃描方式的,frame_format為0時表示隔行掃描,即使用TVP5151;為1時就表示逐行掃描,即使用OV5640。原本ccdc_hw_if->setstd()函數還可以對掃描方式進行設定,但是由于本設計所使用的內核版本的缺陷,設定無法生效,所以添加了一個小補丁:在內核VOFE驅動中聲明了一個變量scanmode,并使用EXP ORT_SYMBOL(scanmode)使之成為內核全局變量。然后分別在TVP5151和OV5640驅動的intialize函數中對其進行賦值。TVP5151為隔行掃描,故對其賦0,OV5640則相反。這樣,每次切換攝像頭后,在初始化采集芯片的同時也會對CCDC的掃描方式進行選擇。

3 測試結果

  測試在實驗室的單兵設備上進行。在后置的OV5640攝像頭模組和外置的TVP5151攝像頭模組之間進行了切換,外置攝像頭更清晰,也更靈活。而內置的則勝在方便、小巧。設計達到了預期目標。測試效果圖如圖5所示。

005.jpg

4 結論

  嵌入式芯片技術的快速發展,使其在視頻監控設備總的應用越來越廣泛。同樣發展迅速的還有視頻采集芯片。本文設計實現了基于TMS320DM365硬件平臺的多攝像頭軟硬件切換方案,采用了CMOS和CCD兩種器件,實現了不同廠家型號、不同掃描方式的視頻采集芯片模組之間的順暢切換。這在視頻采集芯片發展越來越多樣化的今天,有一定的意義。

  參考文獻

  [1] 苗潤生.3G移動視頻監控業務的應用與發展[D].北京:北京郵電大學,2010.

  [2] 李佳林,劉永春.基于S3C2440網絡視頻采集系統的設計與實現[J].電腦知識與技術,2014(6):1314-1316, 1325.

  [3] 王旭東,葉玉堂.CMOS與CCD圖像傳感器的比較研究和發展趨勢[J].電子設計工程,2010(11):178-181.

  [4] 徐凱,錢燕,魏宗群,等.基于TMS320DM365的3G實時視頻傳輸系統設計與實現[J].浙江農業科學,2012(7):1056-1059.

  [5] Texas Instruments. Davinci Linux VPFE Capture Driver [EB/OL]. [2015-07-15]. http://www.ti.com/lit/an/sprs566a/ sprs566a. pdf.2015.2.

  [6] 潘力策,孟利民.基于DM365的雙碼流視頻監控設備的設計與實現[J].微型機與應用,2015,34(10):41-43,47.


此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
99成人免费视频| 欧美在线亚洲综合一区| 国产精品免费小视频| 欧美激情综合亚洲一二区| 久久精品伊人| 欧美诱惑福利视频| 亚洲欧美日韩区| 亚洲香蕉网站| 亚洲精品一级| 亚洲另类一区二区| 亚洲免费大片| 亚洲免费高清| 一区二区三区国产精华| 一本色道久久综合亚洲精品高清| 亚洲毛片在线看| 日韩亚洲成人av在线| 亚洲免费大片| 在线视频欧美一区| 亚洲午夜av在线| 亚洲午夜极品| 亚洲免费中文| 欧美制服第一页| 久久久夜精品| 裸体一区二区| 欧美精品日韩| 国产精品jvid在线观看蜜臀| 国产精品久久久久免费a∨大胸| 国产精品久久久久久久电影 | 香蕉久久国产| 欧美专区在线| 久久久久久久久蜜桃| 老司机精品视频一区二区三区| 免费成人在线视频网站| 欧美日韩国产限制| 国产精品日韩在线播放| 国产欧美日韩综合精品二区| 国产午夜精品视频| 在线欧美日韩精品| 妖精视频成人观看www| 亚洲欧美日韩专区| 亚洲国产精品va在线观看黑人| 亚洲美女免费视频| 亚洲在线免费视频| 久久久久久久网| 麻豆精品视频| 欧美日韩在线免费视频| 国产精品网站在线| 精品91久久久久| 亚洲三级色网| 亚洲欧美日韩中文视频| 亚洲电影毛片| 亚洲午夜精品久久| 久久精品一区| 欧美激情按摩在线| 国产精品日韩在线观看| 韩国在线一区| 日韩视频在线观看免费| 午夜视频久久久| 亚洲人成在线播放网站岛国| 亚洲一区二三| 久久亚洲春色中文字幕| 欧美日韩在线观看视频| 国产一区激情| av不卡免费看| 久久精品国产91精品亚洲| 亚洲视频国产视频| 久久综合99re88久久爱| 欧美视频在线视频| 韩日欧美一区| 亚洲色图自拍| 亚洲人成人一区二区在线观看| 亚洲欧美日韩一区| 欧美大色视频| 国产一区二区久久精品| 夜夜精品视频| 亚洲国产综合91精品麻豆| 亚洲欧美国产一区二区三区| 国产精品久久久久一区二区三区共 | 亚洲人成网站影音先锋播放| 亚洲一区不卡| 亚洲人成人77777线观看| 欧美一区二区三区四区高清| 欧美精品一区三区| 国产一区视频网站| 一区二区三区欧美在线观看| 亚洲国产美女久久久久| 欧美一区二区三区男人的天堂| 欧美精品在线播放| 红桃视频国产一区| 亚洲天堂av图片| 一本久久精品一区二区| 麻豆精品网站| 国产视频精品免费播放| 中文国产一区| 一区二区日韩欧美| 欧美成年人网| 国内自拍一区| 午夜视频在线观看一区| 亚洲欧美成人一区二区在线电影| 欧美片在线观看| 亚洲高清在线视频| 亚洲第一网站| 久久久久国色av免费观看性色| 国产精品午夜av在线| 夜夜夜精品看看| 亚洲欧美经典视频| 亚洲欧美久久久| 欧美色网在线| 亚洲精品一区二区三区樱花| 亚洲国产精品久久久久| 久久久人成影片一区二区三区观看 | 亚洲伊人网站| 欧美日韩激情小视频| 亚洲欧洲精品一区二区三区不卡 | 亚洲免费伊人电影在线观看av| 中文日韩欧美| 欧美日韩精品在线| 亚洲国产一区二区三区青草影视| 亚洲二区视频| 美女亚洲精品| 在线免费观看日本欧美| 亚洲国产裸拍裸体视频在线观看乱了中文 | 亚洲欧美综合网| 久久www成人_看片免费不卡| 国产精品一区二区视频 | 久久大逼视频| 国产欧美一区二区精品性| 亚洲欧美国产毛片在线| 欧美一区二区免费视频| 国产女主播视频一区二区| 欧美1区2区3区| 久久成人人人人精品欧| 小嫩嫩精品导航| 国产免费成人av| 香蕉亚洲视频| 狼人天天伊人久久| 亚洲国产乱码最新视频| 亚洲精品综合久久中文字幕| 欧美激情亚洲综合一区| 亚洲精品之草原avav久久| 亚洲视频欧美视频| 国产精品久久影院| 欧美一区免费视频| 久久久噜噜噜久久| **网站欧美大片在线观看| 亚洲激情自拍| 欧美日韩高清在线一区| 亚洲午夜久久久久久久久电影院| 欧美在线亚洲一区| 永久免费毛片在线播放不卡| 亚洲精品影院在线观看| 欧美日韩精品免费 | 亚洲欧美日韩综合一区| 国产麻豆午夜三级精品| 香蕉久久国产| 美女在线一区二区| 亚洲三级电影在线观看| 亚洲一区二区三区免费观看| 国产精品一区毛片| 亚洲国产另类 国产精品国产免费| 欧美精品一区二区视频| 亚洲一二三区视频在线观看| 久久成人免费网| 玉米视频成人免费看| 中文精品视频| 国产视频一区在线| 亚洲日本无吗高清不卡| 欧美日韩亚洲三区| 欧美制服第一页| 欧美精品一区在线观看| 亚洲永久网站| 免费高清在线视频一区·| 一区二区电影免费在线观看| 久久久精品动漫| 亚洲精品国产无天堂网2021| 午夜精品久久久久久久久久久| 国内外成人免费激情在线视频| 99riav国产精品| 国产无一区二区| 亚洲精品久久在线| 国产精品视频一二三| 亚洲欧洲视频在线| 国产精品视频99| 亚洲黄一区二区| 国产精品都在这里| 亚洲韩国青草视频| 国产精品综合网站| 99在线精品视频| 国产婷婷色一区二区三区| 日韩一级在线观看| 国产综合欧美| 亚洲欧美国产视频| 亚洲黄色成人久久久| 久久福利一区| 日韩午夜在线电影| 麻豆精品视频在线观看视频| 亚洲女优在线| 欧美区高清在线| 亚洲国产视频直播| 国产精品网站视频|