資料介紹
Spark的原生調(diào)度策略建立在集群同質(zhì)化的基本假設(shè)上。然而隨著硬件的更迭以及高性能硬件的引入,集群異質(zhì)化現(xiàn)象日趨顯著。因此現(xiàn)有的調(diào)度策略在異構(gòu)集群環(huán)境下并不高效,短板效應(yīng)嚴(yán)重。針對這個問題,本文提出了一種新的調(diào)度策略以優(yōu)化Spark在異構(gòu)集群下的表現(xiàn)。新策略引入了分層調(diào)度的思想,調(diào)度時綜合考量了任務(wù)復(fù)雜度、節(jié)點(diǎn)性能及節(jié)點(diǎn)資源使用情況等因素,實(shí)現(xiàn)了更加高效公平的任務(wù)調(diào)度算法。通過仿真和真機(jī)實(shí)驗(yàn),證明了新策略的效果相對于原策略有明顯提升。
- 大規(guī)模異構(gòu)計(jì)算集群的雙層作業(yè)調(diào)度系統(tǒng) 1次下載
- 云環(huán)境下HEDSM工作流調(diào)度策略綜述 6次下載
- 異構(gòu)云環(huán)境中二級實(shí)時密碼服務(wù)調(diào)度策略 9次下載
- 基于約束關(guān)鍵路徑的代價優(yōu)化調(diào)度算法 2次下載
- 一種5G網(wǎng)絡(luò)云原生應(yīng)用資源調(diào)度優(yōu)化策略 9次下載
- 一種全新的綜合能源系統(tǒng)動態(tài)經(jīng)濟(jì)調(diào)度方法 0次下載
- 在Storm環(huán)境下如何進(jìn)行拓?fù)浣Y(jié)構(gòu)的任務(wù)調(diào)度策略 9次下載
- 如何使用Spark進(jìn)行并行FP-Growth算法優(yōu)化及實(shí)現(xiàn) 4次下載
- 基于Docker的云資源彈性調(diào)度策略 0次下載
- 異構(gòu)Hadoop集群下的負(fù)載自適應(yīng)反饋調(diào)度策略 11次下載
- 一種新的多級能量異構(gòu)WSNs簇優(yōu)化算法 0次下載
- 一種可重構(gòu)流媒體調(diào)度算法
- 一種面向應(yīng)用優(yōu)化的片上總線調(diào)度策略
- 一種解決函數(shù)優(yōu)化問題的免疫算法
- 一種動態(tài)并行I/O調(diào)度新策略的研究
- 解讀 OM3 多模光纖在測試行業(yè)的應(yīng)用,最后一種令人稱奇! 200次閱讀
- 深度神經(jīng)網(wǎng)絡(luò)(DNN)架構(gòu)解析與優(yōu)化策略 577次閱讀
- FusionCompute集群重點(diǎn)知識點(diǎn)梳理 500次閱讀
- Blaze: 用Rust重寫Spark執(zhí)行層,平均提升30%算力 766次閱讀
- 解析優(yōu)化的調(diào)度邏輯和cuda實(shí)現(xiàn) 1080次閱讀
- 基于matlab遺傳算法求解柔性車間調(diào)度問題 638次閱讀
- 基于邊界點(diǎn)優(yōu)化和多步路徑規(guī)劃的機(jī)器人自主探索策略 1278次閱讀
- RTOS應(yīng)用中的調(diào)度策略 539次閱讀
- Kubernetes的集群部署 1486次閱讀
- Efinity優(yōu)化策略掃描與運(yùn)行 2189次閱讀
- 基于下界函數(shù)的最優(yōu)化這樣一種優(yōu)化思路 2459次閱讀
- 什么是Hadoop? Spark和Hadoop對比 6751次閱讀
- 一文讀懂 Spark 內(nèi)存管理 914次閱讀
- 構(gòu)建機(jī)器學(xué)習(xí)管道和使用Apache Spark時的一些經(jīng)驗(yàn) 5202次閱讀
- 數(shù)字集群對講機(jī)的定義及功能解讀 1.7w次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費(fèi)下載
- 0.00 MB | 1490次下載 | 免費(fèi)
- 2單片機(jī)典型實(shí)例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實(shí)例詳細(xì)資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關(guān)電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費(fèi)
- 6基于AT89C2051/4051單片機(jī)編程器的實(shí)驗(yàn)
- 0.11 MB | 4次下載 | 免費(fèi)
- 7基于單片機(jī)和 SG3525的程控開關(guān)電源設(shè)計(jì)
- 0.23 MB | 3次下載 | 免費(fèi)
- 8基于單片機(jī)的紅外風(fēng)扇遙控
- 0.23 MB | 3次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費(fèi)
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費(fèi)
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費(fèi)
- 5555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33562次下載 | 免費(fèi)
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費(fèi)
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費(fèi)
- 8開關(guān)電源設(shè)計(jì)實(shí)例指南
- 未知 | 21539次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537791次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191183次下載 | 免費(fèi)
- 7十天學(xué)會AVR單片機(jī)與C語言視頻教程 下載
- 158M | 183277次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138039次下載 | 免費(fèi)
評論
查看更多