摘要:?jiǎn)?dòng)時(shí)會(huì)向的路徑下寫(xiě)入文件,寫(xiě)入成功的則為,否則為。根據(jù)上下文以及從收集到的狀態(tài)信息分配資源并調(diào)度,啟動(dòng)一個(gè)用來(lái)運(yùn)行。負(fù)責(zé)啟動(dòng),監(jiān)控所在節(jié)點(diǎn)的資源使用情況,并通過(guò)心跳機(jī)制報(bào)告給。
HA:RM啟動(dòng)時(shí)會(huì)向zk的/mrstore路徑下寫(xiě)入lock文件,寫(xiě)入成功的則為active RM,否則為standby RM。啟動(dòng)后,RM會(huì)將job信息寫(xiě)入/mrstore,RM進(jìn)程中的ZKFC線程會(huì)監(jiān)控/mrstore中的lock文件,若不存在則RM為active,存在則為standby,切換后可從/mrstore讀取job信息。
運(yùn)行:Client提交job,會(huì)訪問(wèn)RM,若訪問(wèn)到standby RM則重新訪問(wèn)active RM。RM根據(jù)job上下文以及從NM收集到的狀態(tài)信息分配資源并調(diào)度,啟動(dòng)一個(gè)container用來(lái)運(yùn)行AM。NM負(fù)責(zé)啟動(dòng)container,監(jiān)控所在節(jié)點(diǎn)的資源使用情況,并通過(guò)心跳機(jī)制報(bào)告給RM。job的task會(huì)在container中運(yùn)行。
RM,NM相當(dāng)于寫(xiě)字樓的管理者,RM總管,NM區(qū)域管理,它們提供container(辦公室);
AM相當(dāng)于項(xiàng)目經(jīng)理,向?qū)懽謽枪芾碚呱暾?qǐng)辦公室,在它們提供的container上執(zhí)行task,完成客戶提交的job。
文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://systransis.cn/yun/74042.html
摘要:會(huì)實(shí)時(shí)從上讀取信息,進(jìn)行重演,保持與的數(shù)據(jù)同步。如果掛掉了,會(huì)監(jiān)控到,向集群發(fā)送心跳報(bào)告時(shí)會(huì)將這一消息報(bào)告上去,集群會(huì)進(jìn)行選舉,被選舉到的所在節(jié)點(diǎn)的進(jìn)程收到通知,這個(gè)會(huì)切換的狀態(tài)為。 showImg(https://segmentfault.com/img/bVbqOJn?w=1280&h=720); 讀寫(xiě):客戶端通過(guò)命名空間發(fā)請(qǐng)求,可以無(wú)感知的找到active NN,active N...
摘要:近幾年,深度學(xué)習(xí)高速發(fā)展,出現(xiàn)了大量的新模型與架構(gòu),以至于我們無(wú)法理清網(wǎng)絡(luò)類型之間的關(guān)系。是由深度學(xué)習(xí)先驅(qū)等人提出的新一代神經(jīng)網(wǎng)絡(luò)形式,旨在修正反向傳播機(jī)制。當(dāng)多個(gè)預(yù)測(cè)一致時(shí)本論文使用動(dòng)態(tài)路由使預(yù)測(cè)一致,更高級(jí)別的將變得活躍。 近幾年,深度學(xué)習(xí)高速發(fā)展,出現(xiàn)了大量的新模型與架構(gòu),以至于我們無(wú)法理清網(wǎng)絡(luò)類型之間的關(guān)系。在這篇文章中,香港科技大學(xué)(HKUST)助理教授金成勳總結(jié)了深度網(wǎng)絡(luò)類型之間...
摘要:一圖讀懂線程與進(jìn)程一個(gè)進(jìn)程可以包含一個(gè)或多個(gè)線程。棧幀中保存了該函數(shù)的返回地址和局部變量。公眾號(hào)貓說(shuō)現(xiàn)架構(gòu)設(shè)計(jì)碼農(nóng)兼創(chuàng)業(yè)技術(shù)顧問(wèn),不羈平庸,熱愛(ài)開(kāi)源,雜談程序人生與不定期干貨。 本博客 貓叔的博客,轉(zhuǎn)載請(qǐng)申明出處 前言 本系列將由淺入深,學(xué)習(xí)Java并發(fā)多線程。 一圖讀懂線程與進(jìn)程 showImg(https://segmentfault.com/img/remote/14600000...
閱讀 3849·2021-09-27 13:56
閱讀 888·2021-09-08 09:36
閱讀 775·2019-08-30 15:54
閱讀 618·2019-08-29 17:29
閱讀 938·2019-08-29 17:21
閱讀 1693·2019-08-29 16:59
閱讀 2771·2019-08-29 13:03
閱讀 2973·2019-08-29 12:47