《電子技術應用》
您所在的位置:首頁 > 通信與網絡 > 設計應用 > 多層概率決策的網絡大數據協作融合算法
多層概率決策的網絡大數據協作融合算法
2018年電子技術應用第6期
曾康銘,吳 杏
南寧學院 信息工程學院,廣西 南寧530200
摘要: 為了改善網絡大數據傳輸效率及其精度,降低網絡數據傳輸負荷,基于多層概率網絡模型和聯合決策研究了一種網絡大數據協作融合算法。首先,以復雜異構多層網絡的數據采集與緩存為對象,以實時感知數據及其準確處理為優化目標,設計了一種多層概率聯合決策模型。接著,通過主層-分層和信號強度進行網絡大數據的多維描述,結合3步分解和三性融合,以逆變換去噪為驅動,提出了網絡大數據協作數據融合算法。最后,實驗和仿真結果表明,與實驗統計值相比,所提算法在數據融合精度和效率等方面具有明顯優勢。
中圖分類號: TP393
文獻標識碼: A
DOI:10.16157/j.issn.0258-7998.174081
中文引用格式: 曾康銘,吳杏. 多層概率決策的網絡大數據協作融合算法[J].電子技術應用,2018,44(6):133-137.
英文引用格式: Zeng Kangming,Wu Xing. The network big data cooperative fusion algorithm based on multi layer probabilistic joint decision[J]. Application of Electronic Technique,2018,44(6):133-137.
The network big data cooperative fusion algorithm based on multi layer probabilistic joint decision
Zeng Kangming,Wu Xing
College of Information Engineering,Nanning University,Nanning 530200,China
Abstract: In order to improve the efficiency and accuracy of network large data transmission and reduce the network data transmission load, a network large data fusion algorithm based on multilayer probabilistic network model and joint decision making is studied. Firstly, based on the data acquisition and caching of complex heterogeneous multi-layer networks, a multi-level probabilistic joint decision model is designed, which takes real-time sensing data and its accurate processing as the optimization objective. Then, through the main layer stratification and the signal strength of multidimensional network big data description, combined with the three step decomposition and three fusion, driven by transform denoising, the network data collaboration data fusion algorithm is proposed. Finally, the experimental and simulation results show that the proposed algorithm has obvious advantages in terms of data fusion accuracy and efficiency compared with experimental statistics.
Key words : multi layer probability;joint decision;big data;network cooperation control;data fusion

0 引言

    復雜網絡控制與大數據傳輸已經成為大數據質量保障面臨的關鍵研究問題[1],特別是,復雜網絡時滯擴散性[1]、同步控制[2]、應急通信網絡的大數據分析[3]、空地跨域大數據通信[4-5]等問題對大數據質量的影響嚴重。為有效解決上述問題,數據融合[6]被引入,并得到廣泛應用[7]。不過,復雜網絡的大數據融合性能依然受到網絡復雜度、數據碰撞和外界干擾等因素[8]制約,這些問題亟待解決。

    在充分考慮網絡狀況及服務器之間的通信關聯等基礎上,文獻[9]基于OpenFlow網絡控制器,集中管理網絡狀態信息,提出了基于OpenFlow網絡的數據中心服務器負載均衡策略,從而有效改善虛擬機遷移后網絡擁塞而影響系統性能。文獻[10]研究了具有隨機噪聲和隨機概率分布的隨機鏈路網絡的最優控制問題。為了應對大數據的影響,文獻[11]將傳統的個人計算、通信和存儲系統結合起來,討論了一種有效的信息系統容量,以便在更有自由度的新范式下挖掘信息系統的潛力。文獻[12]首先提出了一個通用的建模框架,描述了在大數據流處理所有的任務關系語義間的代表,在此基礎上解決了通信成本最小化的問題。文獻[13]提出了一種系統和自動化的方法來建立一個混合的入侵檢測系統,學習基于時域的電力系統場景的規范,包括干擾、正??刂撇僮骱途W絡攻擊等。文獻[14]所提出的區間自適應加權波長選擇算法采用多模型融合方案,通過減少波長數量來精準預測,自適應優化選擇波長。在異構信息空間中,文獻[15]通過查詢時間上下文關鍵字,研究了一種時間感知的查詢時實體識別與數據融合方法。

    在已有復雜網絡控制、大數據傳輸和數據融合的一系列研究基礎上,本文從多層概率模型、數據傳輸聯合決策和網絡寫作控制等多維角度出發,研究了一種具有高傳輸精度、高傳輸效率和低數據融合誤差的網絡大數據協作融合機制。

1 多層概率聯合決策模型

    復雜異構多層網絡的數據采集與緩存機制以實時感知數據和準確處理決策信息為核心,消除外界環境的冗余信息與各類型干擾對網絡數據的質量制約。但對于多層網絡的數據采集與傳輸概率控制和維護系統穩定性的決策機制,成為網絡大數據融合的瓶頸問題。

    首先,假設一個多層離散線性隨機網絡系統如式(1)所示:

jsj6-gs1-3.gif

jsj6-gs1-3-x1.gif

jsj6-t1.gif

jsj6-gs4-6.gif

其中,N表示多層網絡的分層數。

2 網絡大數據協作融合算法

    基于多層概率聯合決策的網絡收集的大數據,從主層-分層角度出發采用S、L描述,如式(7)所示,還可以從信號強度出發采用H、M、L描述,如式(9)所示。

jsj6-gs7-10.gif

jsj6-t2.gif

    綜上所述,網絡大數據協作融合算法實施過程如圖3所示。其中,根據分解3步進行三性融合,結合聯合決策,以逆變換去噪為驅動,實現協作數據融合。

jsj6-t3.gif

3 實驗結果分析

    通過在200 m2的室內環境部署50個傳感器節點,持續采集100小時的溫度數據為網絡大數據源。傳感器節點采用無源供電方式,會因電池耗盡而消亡,網絡拓撲會發生動態變化。每個傳感器節點間隔10 s發送一次數據??赏ㄟ^是否供電來激活傳感器節點。本文所提出的網絡大數據協作融合算法記為CFA-MJD,偽代碼如下:

    jsj6-t3-x1.gif

jsj6-t3-x2.gif

    采用Java與C++相結合的方式實現上述算法,測試不同傳輸精度下的數據傳輸速率以及數據融合誤差。實驗環境參數詳見表1。

jsj6-b1.gif

    圖4和圖5給出了兩種不同傳輸精度下所提出CFA-MJD算法的數據傳輸速率與實驗速率統計值的對比結果。對比發現,當傳輸精度為40%時,CFA-MJD算法的傳輸率與實驗值較為接近;當傳輸精度為90%時,CFA-MJD算法的傳輸率反而高于實驗值。這表明,所提算法可以有效改進網絡大數據傳輸率并且保障較高的傳輸精度。這是因為所提算法采用了多層隨機網絡架構?;诜謱有盘柛蓴_和局部不確定因素集,結合網絡整體信號傳輸優化目標需求,通過聯合決策保持了大數據的一致性,并有效降低了數據發生沖突的概率。

jsj6-t4.gif

jsj6-t5.gif

    圖6給出了服務器響應延遲為5 s、10 s、15 s和20 s時,所提算法的數據融合誤差與實際統計誤差的對比結果。分析發現,所提算法所采用的在分層協作控制下對聯合決策下的接收信號yU分解即對yU按層還原,消除冗余信號和逐層更新yU,以及三性融合,確保了網絡大數據融合精度,并且可以很好地化解服務器大延遲造成的數據誤差。

jsj6-t6.gif

4 結束語

    復雜異構網絡的大數據傳輸面臨著效率低下、精度難以得到保障等問題,同時網絡數據傳輸負荷較大,導致資源利用率較低。為了有效解決上述問題,本文提出了一種基于多層概率網絡模型和聯合決策的網絡大數據協作融合算法。一方面,為多層網絡的數據源及其存儲控制建立實時感知和分層傳輸處理模型,在此基礎上提出一種具有多層概率協作的網絡大數據傳輸聯合決策模型;另一方面,從主層-分層和多層接收信號強度出發,給出了網絡大數據的多維描述,通過接收信號的3步分解和網絡的三性融合,提出了網絡大數據協作數據融合算法。實驗統計和仿真表明,所提算法可以有效改善網絡大數據融合精度、傳輸精度和網絡效率等性能。

參考文獻

[1] 羅毅平,周筆鋒.時滯擴散性復雜網絡同步保性能控制[J].自動化學報,2015,41(1):147-156.

[2] 張崢,朱炫穎.復雜網絡同步控制的研究進展[J].信息與控制,2017,46(1):103-112.

[3] WANG J,WU Y,YEN N,et al.Big data analytics for emergency communication networks:a survey[J].IEEE Communications Surveys & Tutorials,2016,18(3):1758-1778.

[4] XIONG G,ZHU F,DONG X,et al.A kind of novel ITS based on space-air-ground big-data[J].IEEE Intelligent Transportation Systems Magazine,2016,8(1):10-22.

[5] LIN K,XIA F,WANG W,et al.System design for big data application in emotion-aware healthcare[J].IEEE Access,2016,4:6901-6909.

[6] CHIOU Y S,TSAI F.A reduced-complexity data-fusion algorithm using belief propagation for location tracking in heterogeneous observations[J].IEEE Transactions on Cybernetics,2014,44(6):922.

[7] Liu Kaibo,CHEHADE A,Song Changyue.Optimize the signal quality of the composite health index via data fusion for degradation modeling and prognostic analysis[J].IEEE Transactions on Automation Science and Engineering,2017,14(3):1504-1514.

[8] ALAM F,MEHMOOD R,KATIB I,et al.Data fusion and IoT for smart ubiquitous environments:a survey[J].IEEE Access,2017,5:9533-9551.

[9] 秦華,閻鋼.基于OpenFlow網絡的數據中心服務器負載均衡策略[J].計算機工程,2016,42(3):130-137.

[10] GATTAMI A.Optimal network control with stochastic link variations and indefinite quadratic constraints[J].IEEE Transactions on Control of Network Systems,2017,4(2):259-266.

[11] Fan Pingzhi.Coping with the big data:convergence of communications, computing and storage[J].China Communications,2016,13(9):203-207.

[12] Gu Lin,Zeng Deze,Guo Song,et.al.A general communication cost optimization framework for big data stream processing in geo-distributed data centers[J].IEEE Transactions on Computers,2016,65(1):19-29.

[13] PAN S,MORRIS T,ADHIKARI U.Developing a hybrid intrusion detection system using data mining for power systems[J].IEEE Transactions on Smart Grid,2015,6(6):3104-3113.

[14] 陳曉輝,黃劍.基于iPLS和CARS數據融合技術的波長選擇算法[J].計算機工程與應用,2016,52(16):229-232.

[15] 楊丹,陳默,王剛,等.異構信息空間中時間感知的查詢時實體識別與數據融合[J].計算機科學,2017,44(3):215-219.



作者信息:

曾康銘,吳  杏

(南寧學院 信息工程學院,廣西 南寧530200)

此內容為AET網站原創,未經授權禁止轉載。
主站蜘蛛池模板: 日本久久久久亚洲中字幕| 狠狠色狠狠色综合日日不卡| 国产精品久久久久久久久kt| free性满足hd极品| 无码A级毛片免费视频内谢| 久久综合综合久久综合| 欧美日韩一区二区视频图片| 免费a级毛片在线播放| 美女毛片在线观看| 国产偷窥熟女精品视频| 国产在线播放你懂的| 国产精品深夜福利免费观看| av天堂午夜精品一区| 小唐璜情史在线播放| 中文字幕视频不卡| 日本狂喷奶水在线播放212| 亚洲av无码一区二区三区性色 | 国产aⅴ精品一区二区三区久久| 黄色片一级毛片| 国产真实乱人视频| 18禁亚洲深夜福利人口| 国产露出调教91| 99久久精品这里只有精品| 女人是男人的未来你的皮肤很柔顺| 中文字幕一二三四区2021| 无码精品一区二区三区免费视频| 久久国产精品免费一区二区三区| 最新国产乱人伦偷精品免费网站| 亚洲人成影院在线无码按摩店| 欧美日韩国产精品自在自线| 亚洲熟妇AV一区二区三区漫画| 激性欧美激情在线| 人人添人人妻人人爽夜欢视av| 狠狠躁日日躁夜夜躁2022麻豆| 人妻少妇精品视频一区二区三区| 男女性潮高清免费网站| 免费国产成人午夜电影| 男女啪啪免费体验区| 免费无码专区毛片高潮喷水| 秋霞日韩久久理论电影| 免费h视频在线观看|