麻豆黑色丝袜jk制服福利网站-麻豆精品传媒视频观看-麻豆精品传媒一二三区在线视频-麻豆精选传媒4区2021-在线视频99-在线视频a

千鋒教育-做有情懷、有良心、有品質的職業教育機構

手機站
千鋒教育

千鋒學習站 | 隨時隨地免費學

千鋒教育

掃一掃進入千鋒手機站

領取全套視頻
千鋒教育

關注千鋒學習站小程序
隨時隨地免費學習課程

當前位置:首頁  >  應聘面試  >  大數據面試題  > Yarn Job 提交流程(重點)

Yarn Job 提交流程(重點)

來源:千鋒教育
發布人:wjy
時間: 2022-09-02 15:36:17 1662104177

1. MR程序創建成功后,需要提交到HDFS上運行,MR程序提交到客戶端所在的節點。

2. YarnRunner向ResourceManager申請提交一個Application。

3. ResourceManager返回應用程序需要提交的資源路徑和ApplicationId。

4. YarnRunner提交資源到HDFS上,包含Job.xml、Job.split、xx.jar,資源提交完畢之后,向ResourceManager申請一個運行MRApplicationMaster,一個Application對應一個ApplicationMaster。

5. ResourceManager把提交的Job初始化成一個Task,放入Yarn的調度隊列中去。

Yarn Job 提交流程(重點)

6. 當執行到此Task時,其中一臺NodeManager領取此任務,然后在此NodeManager上創建一個Container并創建一個MRApplicationMaster,然后下載HDFS上的計算資源(Job.xml、Job.split、xx.jar)到此NodeManager上。

7. MRApplicationMaster向ResourceManager申請運行MapTask的資源,同時ResourceManager向另外兩臺NodeManager分配執行MapTask的任務,這兩臺NodeManager分別創建Container,然后MRApplicationMaster將啟動腳本發送給這兩臺NodeManager,啟動MapTask任務。

8. 當MapTask執行完畢之后,MRApplicationMaster向ResourceManager申請執行ReduceTask的資源,ResourceManager分配資源創建Container,Container下載xx.jar到此Container中,MRApplicationMaster啟動此任務。 

9. ReduceTask獲取MapTask分區數據,進行計算。

10. 當ReduceTask運行完畢之后,通知MRApplicationMaster,注銷ReduceTask的資源,MRApplicationMaster向ResourceManager申請注銷自己。

tags:
聲明:本站稿件版權均屬千鋒教育所有,未經許可不得擅自轉載。
10年以上業內強師集結,手把手帶你蛻變精英
請您保持通訊暢通,專屬學習老師24小時內將與您1V1溝通
免費領取
今日已有369人領取成功
劉同學 138****2860 剛剛成功領取
王同學 131****2015 剛剛成功領取
張同學 133****4652 剛剛成功領取
李同學 135****8607 剛剛成功領取
楊同學 132****5667 剛剛成功領取
岳同學 134****6652 剛剛成功領取
梁同學 157****2950 剛剛成功領取
劉同學 189****1015 剛剛成功領取
張同學 155****4678 剛剛成功領取
鄒同學 139****2907 剛剛成功領取
董同學 138****2867 剛剛成功領取
周同學 136****3602 剛剛成功領取
相關推薦HOT
主站蜘蛛池模板: 国产熟睡乱子伦视频| 国产一区二区高清| 久久免费视频网站| 国产精品国产三级国产潘金莲| 国产美女mm131爽爽爽毛片| 久久国产精品二国产精品 | 国产乱理伦片在线观看大陆| 国产v亚洲v欧美v专区| 久久夜色精品国产亚洲| 美国式禁忌在完整有限中字| av天天看| 巨粗黑吊| 国产精品宅男在线观看| 久久96精品国产| av成人在线电影| 美女裸免费观看网站| 99久久精品免费看国产一区二区三区| 狠狠色欧美亚洲狠狠色www| 狠狠色欧美亚洲狠狠色www| 日本里番全彩acg里番下拉式 | 日韩日韩日韩日韩日韩| 嗯啊啊啊视频| 国产大尺度吃奶无遮无挡| 深夜福利gif动态图158期| 亚洲毛片免费观看| 久久精品麻豆日日躁夜夜躁| 亚洲精品午夜国产va久久成人 | 亚洲视频国产视频| 亚洲成av人片在线观看| 国产综合精品| 学校触犯×ofthedead| 欧美a级完整在线观看| 小帅男同志chinesecouple| 波多野结衣教师在线| 天堂mv免费mv在线mv观看| a级精品国产片在线观看| 国产刺激视频| eeuss影院www在线观看免费| 北条麻妃一本到高清在线观看| 无限在线观看下载免费视频| 夫妇交换俱乐部微信群|