面向智能電網云存儲的副本技術研究.pdf

1、近年來隨著國家智能電網的發(fā)展，智能電網采集到的數據成倍增長，不僅包括結構化數據，而且包括一些半結構化、非結構化的音頻視頻數據。如何安全的存儲和高效的處理這些數據，成為智能電網發(fā)展亟待解決的問題。云存儲系統(tǒng)具有安全性高、數據存儲量大、易擴展等特點，能夠有效的存儲智能電網采集的海量數據。云存儲副本技術，可以有效的保證數據存儲的安全性與處理任務的并發(fā)性，然而副本技術又帶來了諸如副本一致性，負載均衡，副本訪問代價等一系列問題。而良好的數據放置策

2、略可以解決負載均衡問題，數據選擇策略可以選擇代價最小的數據副本。智能電網云存儲系統(tǒng)中的數據放置策略以及數據選擇策略是本文研究的重點。
　　首先，給出了基于相對存儲能力的副本放置策略與基于訪問熱度的調整策略。由于智能電網云存儲系統(tǒng)數據副本放置的不規(guī)范性，根據異構節(jié)點的相對存儲能力進行數據存儲，保證了負載均衡；并且根據智能電網采集數據的相關性，通過設置相關系數，將相關聯數據進行集中存放，確保了關聯查詢速度；根據智能電網數據處理任務對副

3、本數目的動態(tài)需求性，通過自適應反饋機制，根據數據的訪問熱度，對數據副本進行增減，平衡了讀取負載以及節(jié)約了存儲空間。
　　其次，給出了基于局部最小化代價數據選擇算法，由于智能電網數據處理任務在選擇數據副本時，隨機選擇副本，而不考慮副本訪問代價問題。該算法根據數據副本訪問代價的不同，在數據的不同副本中選擇代價最小的作為處理任務數據輸入；并且優(yōu)化了MapReduce并行編程模型，根據前文中相關聯數據集中存放，將數據連接操作在Map階段進