《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > 多層概率決策的網絡大數據協作融合算法
多層概率決策的網絡大數據協作融合算法
2018年電子技術應用第6期
曾康銘,吳 杏
南寧學院 信息工程學院,廣西 南寧530200
摘要: 為了改善網絡大數據傳輸效率及其精度,降低網絡數據傳輸負荷,基于多層概率網絡模型和聯合決策研究了一種網絡大數據協作融合算法。首先,以復雜異構多層網絡的數據采集與緩存為對象,以實時感知數據及其準確處理為優化目標,設計了一種多層概率聯合決策模型。接著,通過主層-分層和信號強度進行網絡大數據的多維描述,結合3步分解和三性融合,以逆變換去噪為驅動,提出了網絡大數據協作數據融合算法。最后,實驗和仿真結果表明,與實驗統計值相比,所提算法在數據融合精度和效率等方面具有明顯優勢。
中圖分類號: TP393
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.174081
中文引用格式: 曾康銘,吳杏. 多層概率決策的網絡大數據協作融合算法[J].電子技術應用,2018,44(6):133-137.
英文引用格式: Zeng Kangming,Wu Xing. The network big data cooperative fusion algorithm based on multi layer probabilistic joint decision[J]. Application of Electronic Technique,2018,44(6):133-137.
The network big data cooperative fusion algorithm based on multi layer probabilistic joint decision
Zeng Kangming,Wu Xing
College of Information Engineering,Nanning University,Nanning 530200,China
Abstract: In order to improve the efficiency and accuracy of network large data transmission and reduce the network data transmission load, a network large data fusion algorithm based on multilayer probabilistic network model and joint decision making is studied. Firstly, based on the data acquisition and caching of complex heterogeneous multi-layer networks, a multi-level probabilistic joint decision model is designed, which takes real-time sensing data and its accurate processing as the optimization objective. Then, through the main layer stratification and the signal strength of multidimensional network big data description, combined with the three step decomposition and three fusion, driven by transform denoising, the network data collaboration data fusion algorithm is proposed. Finally, the experimental and simulation results show that the proposed algorithm has obvious advantages in terms of data fusion accuracy and efficiency compared with experimental statistics.
Key words : multi layer probability;joint decision;big data;network cooperation control;data fusion

0 引言

    復雜網絡控制與大數據傳輸已經成為大數據質量保障面臨的關鍵研究問題[1],特別是,復雜網絡時滯擴散性[1]、同步控制[2]、應急通信網絡的大數據分析[3]、空地跨域大數據通信[4-5]等問題對大數據質量的影響嚴重。為有效解決上述問題,數據融合[6]被引入,并得到廣泛應用[7]。不過,復雜網絡的大數據融合性能依然受到網絡復雜度、數據碰撞和外界干擾等因素[8]制約,這些問題亟待解決。

    在充分考慮網絡狀況及服務器之間的通信關聯等基礎上,文獻[9]基于OpenFlow網絡控制器,集中管理網絡狀態信息,提出了基于OpenFlow網絡的數據中心服務器負載均衡策略,從而有效改善虛擬機遷移后網絡擁塞而影響系統性能。文獻[10]研究了具有隨機噪聲和隨機概率分布的隨機鏈路網絡的最優控制問題。為了應對大數據的影響,文獻[11]將傳統的個人計算、通信和存儲系統結合起來,討論了一種有效的信息系統容量,以便在更有自由度的新范式下挖掘信息系統的潛力。文獻[12]首先提出了一個通用的建模框架,描述了在大數據流處理所有的任務關系語義間的代表,在此基礎上解決了通信成本最小化的問題。文獻[13]提出了一種系統和自動化的方法來建立一個混合的入侵檢測系統,學習基于時域的電力系統場景的規范,包括干擾、正常控制操作和網絡攻擊等。文獻[14]所提出的區間自適應加權波長選擇算法采用多模型融合方案,通過減少波長數量來精準預測,自適應優化選擇波長。在異構信息空間中,文獻[15]通過查詢時間上下文關鍵字,研究了一種時間感知的查詢時實體識別與數據融合方法。

    在已有復雜網絡控制、大數據傳輸和數據融合的一系列研究基礎上,本文從多層概率模型、數據傳輸聯合決策和網絡寫作控制等多維角度出發,研究了一種具有高傳輸精度、高傳輸效率和低數據融合誤差的網絡大數據協作融合機制。

1 多層概率聯合決策模型

    復雜異構多層網絡的數據采集與緩存機制以實時感知數據和準確處理決策信息為核心,消除外界環境的冗余信息與各類型干擾對網絡數據的質量制約。但對于多層網絡的數據采集與傳輸概率控制和維護系統穩定性的決策機制,成為網絡大數據融合的瓶頸問題。

    首先,假設一個多層離散線性隨機網絡系統如式(1)所示:

jsj6-gs1-3.gif

jsj6-gs1-3-x1.gif

jsj6-t1.gif

jsj6-gs4-6.gif

其中,N表示多層網絡的分層數。

2 網絡大數據協作融合算法

    基于多層概率聯合決策的網絡收集的大數據,從主層-分層角度出發采用S、L描述,如式(7)所示,還可以從信號強度出發采用H、M、L描述,如式(9)所示。

jsj6-gs7-10.gif

jsj6-t2.gif

    綜上所述,網絡大數據協作融合算法實施過程如圖3所示。其中,根據分解3步進行三性融合,結合聯合決策,以逆變換去噪為驅動,實現協作數據融合。

jsj6-t3.gif

3 實驗結果分析

    通過在200 m2的室內環境部署50個傳感器節點,持續采集100小時的溫度數據為網絡大數據源。傳感器節點采用無源供電方式,會因電池耗盡而消亡,網絡拓撲會發生動態變化。每個傳感器節點間隔10 s發送一次數據??赏ㄟ^是否供電來激活傳感器節點。本文所提出的網絡大數據協作融合算法記為CFA-MJD,偽代碼如下:

    jsj6-t3-x1.gif

jsj6-t3-x2.gif

    采用Java與C++相結合的方式實現上述算法,測試不同傳輸精度下的數據傳輸速率以及數據融合誤差。實驗環境參數詳見表1。

jsj6-b1.gif

    圖4和圖5給出了兩種不同傳輸精度下所提出CFA-MJD算法的數據傳輸速率與實驗速率統計值的對比結果。對比發現,當傳輸精度為40%時,CFA-MJD算法的傳輸率與實驗值較為接近;當傳輸精度為90%時,CFA-MJD算法的傳輸率反而高于實驗值。這表明,所提算法可以有效改進網絡大數據傳輸率并且保障較高的傳輸精度。這是因為所提算法采用了多層隨機網絡架構?;诜謱有盘柛蓴_和局部不確定因素集,結合網絡整體信號傳輸優化目標需求,通過聯合決策保持了大數據的一致性,并有效降低了數據發生沖突的概率。

jsj6-t4.gif

jsj6-t5.gif

    圖6給出了服務器響應延遲為5 s、10 s、15 s和20 s時,所提算法的數據融合誤差與實際統計誤差的對比結果。分析發現,所提算法所采用的在分層協作控制下對聯合決策下的接收信號yU分解即對yU按層還原,消除冗余信號和逐層更新yU,以及三性融合,確保了網絡大數據融合精度,并且可以很好地化解服務器大延遲造成的數據誤差。

jsj6-t6.gif

4 結束語

    復雜異構網絡的大數據傳輸面臨著效率低下、精度難以得到保障等問題,同時網絡數據傳輸負荷較大,導致資源利用率較低。為了有效解決上述問題,本文提出了一種基于多層概率網絡模型和聯合決策的網絡大數據協作融合算法。一方面,為多層網絡的數據源及其存儲控制建立實時感知和分層傳輸處理模型,在此基礎上提出一種具有多層概率協作的網絡大數據傳輸聯合決策模型;另一方面,從主層-分層和多層接收信號強度出發,給出了網絡大數據的多維描述,通過接收信號的3步分解和網絡的三性融合,提出了網絡大數據協作數據融合算法。實驗統計和仿真表明,所提算法可以有效改善網絡大數據融合精度、傳輸精度和網絡效率等性能。

參考文獻

[1] 羅毅平,周筆鋒.時滯擴散性復雜網絡同步保性能控制[J].自動化學報,2015,41(1):147-156.

[2] 張崢,朱炫穎.復雜網絡同步控制的研究進展[J].信息與控制,2017,46(1):103-112.

[3] WANG J,WU Y,YEN N,et al.Big data analytics for emergency communication networks:a survey[J].IEEE Communications Surveys & Tutorials,2016,18(3):1758-1778.

[4] XIONG G,ZHU F,DONG X,et al.A kind of novel ITS based on space-air-ground big-data[J].IEEE Intelligent Transportation Systems Magazine,2016,8(1):10-22.

[5] LIN K,XIA F,WANG W,et al.System design for big data application in emotion-aware healthcare[J].IEEE Access,2016,4:6901-6909.

[6] CHIOU Y S,TSAI F.A reduced-complexity data-fusion algorithm using belief propagation for location tracking in heterogeneous observations[J].IEEE Transactions on Cybernetics,2014,44(6):922.

[7] Liu Kaibo,CHEHADE A,Song Changyue.Optimize the signal quality of the composite health index via data fusion for degradation modeling and prognostic analysis[J].IEEE Transactions on Automation Science and Engineering,2017,14(3):1504-1514.

[8] ALAM F,MEHMOOD R,KATIB I,et al.Data fusion and IoT for smart ubiquitous environments:a survey[J].IEEE Access,2017,5:9533-9551.

[9] 秦華,閻鋼.基于OpenFlow網絡的數據中心服務器負載均衡策略[J].計算機工程,2016,42(3):130-137.

[10] GATTAMI A.Optimal network control with stochastic link variations and indefinite quadratic constraints[J].IEEE Transactions on Control of Network Systems,2017,4(2):259-266.

[11] Fan Pingzhi.Coping with the big data:convergence of communications, computing and storage[J].China Communications,2016,13(9):203-207.

[12] Gu Lin,Zeng Deze,Guo Song,et.al.A general communication cost optimization framework for big data stream processing in geo-distributed data centers[J].IEEE Transactions on Computers,2016,65(1):19-29.

[13] PAN S,MORRIS T,ADHIKARI U.Developing a hybrid intrusion detection system using data mining for power systems[J].IEEE Transactions on Smart Grid,2015,6(6):3104-3113.

[14] 陳曉輝,黃劍.基于iPLS和CARS數據融合技術的波長選擇算法[J].計算機工程與應用,2016,52(16):229-232.

[15] 楊丹,陳默,王剛,等.異構信息空間中時間感知的查詢時實體識別與數據融合[J].計算機科學,2017,44(3):215-219.



作者信息:

曾康銘,吳  杏

(南寧學院 信息工程學院,廣西 南寧530200)

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美在线一二三四区| 欧美第一黄色网| 亚洲日韩视频| 亚洲国产成人精品久久| 香蕉成人久久| 午夜精品美女自拍福到在线| 亚洲一区二区视频| 亚洲午夜精品17c| 亚洲天堂av图片| 一区二区三区|亚洲午夜| 日韩亚洲国产精品| 亚洲狼人综合| 一本久久知道综合久久| 99香蕉国产精品偷在线观看| 日韩性生活视频| 亚洲最新合集| 在线视频免费在线观看一区二区| 日韩视频在线观看国产| 亚洲美女视频在线观看| 日韩午夜激情| 亚洲一二三区精品| 亚洲欧美美女| 欧美亚洲视频在线看网址| 久久国产精品久久久久久| 亚洲第一区在线| 亚洲区一区二| 国产精品99久久久久久久久| 亚洲永久精品国产| 欧美在线|欧美| 久久中文字幕一区二区三区| 免费精品99久久国产综合精品| 欧美大色视频| 欧美视频在线观看 亚洲欧| 国产精品乱子久久久久| 国产精品视频福利| 国产综合欧美| 亚洲国产日韩欧美在线图片| 亚洲免费精彩视频| 亚洲免费在线视频一区 二区| 午夜精品一区二区三区在线视| 久久国产精品网站| 日韩亚洲精品电影| 亚洲自拍电影| 久久久xxx| 欧美乱人伦中文字幕在线| 国产精品videossex久久发布| 国产日韩欧美精品| 亚洲第一色在线| 日韩性生活视频| 欧美亚洲三区| 日韩视频免费观看高清在线视频| 亚洲午夜久久久| 久久精品主播| 欧美人与性动交a欧美精品| 国产精品成人一区| 极品中文字幕一区| 日韩午夜av| 欧美一区二视频| 亚洲九九九在线观看| 亚洲欧美国产日韩中文字幕| 久久人91精品久久久久久不卡| 欧美国产日产韩国视频| 国产精品美女久久久免费 | 亚洲第一在线| 亚洲一二三区在线| 亚洲日本欧美在线| 欧美一区二区成人6969| 欧美bbbxxxxx| 国产情侣久久| 夜夜精品视频一区二区| 亚洲福利一区| 午夜在线一区二区| 欧美成人午夜激情| 国产日韩欧美亚洲一区| 亚洲卡通欧美制服中文| 久久精品一区二区| 午夜宅男欧美| 欧美日韩一区二| 国产一区在线看| 亚洲在线观看免费| 一本色道**综合亚洲精品蜜桃冫 | 欧美人牲a欧美精品| 国产一区二区高清不卡| 夜夜嗨av一区二区三区中文字幕 | 99精品视频一区二区三区| 久久久久久久91| 国产精品视频999| 一本色道久久88综合日韩精品| 91久久久一线二线三线品牌| 午夜影院日韩| 国产精品国产三级国产普通话蜜臀| 亚洲二区在线视频| 久久狠狠婷婷| 久久久91精品国产一区二区精品| 国产精品激情偷乱一区二区∴| 亚洲激情另类| 亚洲欧洲日本mm| 久久女同精品一区二区| 国产日产欧美精品| 亚洲欧美成人网| 亚洲欧美中文字幕| 国产精品草莓在线免费观看| 亚洲精品三级| 日韩一区二区精品| 欧美激情成人在线| 亚洲国产精品尤物yw在线观看| 久久精品视频va| 久久久青草青青国产亚洲免观| 国产嫩草一区二区三区在线观看| 一本久道久久综合中文字幕| 国产精品99久久不卡二区| 欧美美女bbbb| 亚洲精品欧美极品| 99这里有精品| 欧美日韩精品久久久| 亚洲美女一区| 这里只有精品电影| 欧美日韩视频在线| 夜夜爽夜夜爽精品视频| 亚洲图片在线| 国产精品久久久久久久久搜平片| 一区二区三区欧美激情| 日韩一二三在线视频播| 欧美日韩1区2区| 日韩一区二区精品葵司在线| 中文日韩在线| 国产精品啊v在线| 亚洲视频一区| 欧美在线观看一区| 国产亚洲成年网址在线观看| 欧美中文字幕| 欧美r片在线| 亚洲免费高清视频| 亚洲欧美久久久久一区二区三区| 国产精品久久一区主播| 亚洲欧美激情在线视频| 久久久国产视频91| 永久域名在线精品| av不卡在线看| 国产精品免费久久久久久| 午夜精品视频在线| 媚黑女一区二区| 亚洲精品影院在线观看| 亚洲免费视频网站| 国产一区二区丝袜高跟鞋图片| 久久精品日韩欧美| 欧美大片91| 亚洲视频精选| 久久精品免费电影| 亚洲黄色一区| 亚洲欧美在线看| 狠狠色丁香婷综合久久| 亚洲日韩欧美一区二区在线| 欧美日韩国产一级片| 午夜国产精品视频| 猛男gaygay欧美视频| 99国产精品久久久久老师| 香蕉乱码成人久久天堂爱免费| 国产在线一区二区三区四区| 亚洲精品日产精品乱码不卡| 欧美日韩亚洲激情| 午夜免费久久久久| 欧美国产高潮xxxx1819| 亚洲视频axxx| 久久综合综合久久综合| 亚洲美女一区| 久久精品亚洲精品| 日韩视频一区二区三区在线播放免费观看 | 国产精品夜色7777狼人| 亚洲国产日韩欧美| 国产精品igao视频网网址不卡日韩| 欧美一区二区三区四区视频| 欧美国产日产韩国视频| 亚洲欧美国产不卡| 欧美激情综合色| 欧美亚洲视频在线看网址| 欧美另类一区| 久久岛国电影| 国产精品国码视频| 亚洲激情自拍| 国产女人18毛片水18精品| 日韩小视频在线观看| 国产在线视频不卡二| 亚洲一区二区三区久久| 伊甸园精品99久久久久久| 午夜免费久久久久| 亚洲国产专区| 久久精选视频| 亚洲一区二区免费看| 欧美激情一区二区三区| 欧美一区二区三区成人| 欧美日韩一区二区三区免费 | 久久一区欧美| 亚洲欧美第一页| 欧美日韩精品免费看| 亚洲国产二区| 国产午夜亚洲精品不卡| 亚洲一区www| 亚洲麻豆av| 欧美激情va永久在线播放|