Hadoop平臺中作業(yè)調度算法分析與改進研究.pdf

1、目前云計算已經成為流行的先進技術模式，具有廣泛的應用，在云計算的環(huán)境下，通過對作業(yè)任務進行劃分使得各個節(jié)點中都有，這樣就可以實現作業(yè)任務的并行化處理，面對云計算中的海量作業(yè)任務如何進行調度和處理成為云計算性能的重要指標，如何保證云計算中的用戶任務作業(yè)得到有效的處理，使得用戶的服務質量(QoS)得到充分的保證，為此，在本文中提出了基于用戶服務等級協(xié)議(SLA)的作業(yè)分級機制和基于QoS約束的多優(yōu)先級作業(yè)調度算法(QoS-MP Schedu

2、ler)，實現對云計算用戶服務質量的保證。
　　針對傳統(tǒng)云計算作業(yè)調度中簡單的優(yōu)先級設置的不足，在本文中首先對作業(yè)調度進行研究提出基于用戶服務等級協(xié)議(SLA)的作業(yè)分級機制。在機制中規(guī)定用戶需要跟云服務商簽訂具有詳細指標規(guī)定的服務等級協(xié)議，按照不同的等級對云用戶的作業(yè)進行分類并將其存儲在作業(yè)分類器中，標記云用戶的作業(yè)等級，保證較高等級作業(yè)得到優(yōu)先的處理;接著，設計基于QoS約束的多優(yōu)先級作業(yè)調度算法，在算法中利用云用戶作業(yè)中的偏

3、好程度來設計優(yōu)先級值計算函數Priority，在作業(yè)調度的時候可以對較高等級的云用戶和具有較高優(yōu)先級的作業(yè)得到任務的執(zhí)行，通過上述方式就可以較好的保證云計算環(huán)境下的服務質量。
　　最后，對Hadoop平臺中作業(yè)調度算法進行仿真實驗，并對實驗結果進行分析。通過仿真實驗，對于具有較高服務等級協(xié)議的云用戶可以得到優(yōu)先的任務安排和調度，基于QoS約束的多優(yōu)先級作業(yè)調度算法可以很好的實現在海量任務調度時保證云用戶的服務質量，并且算法的平均作