溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

HADOOP YARN(一)

發布時間:2020-06-25 09:16:35 來源:網絡 閱讀:536 作者:Lizikunn 欄目:大數據

HADOOP YARN是什么?

        Yarn全稱是Yet Another Resource Negotiator(資源管理器)

基本概念

Container
容器是Yarn對資源的一層抽象。(CPU核數,內存等計算資源)
容器由NodeManager啟動和管理,并被它所監控
容器由ResureceManager調度

ResourceManager(RM)負責資源管理,包含定時調度器(scheduler)和應用管理器(ApplicationManager)

調度器向分配資源,應用管理器監控應用程序。

ApplicationMaster
每提交一個作業,Appmaster向Resourcemanager申請資源,獲得資源后將運行的程序發送到容器啟動。(數據不動,程序動)

Nodemanager
負責容器的管理,監控資源的使用情況,向ResourceManager提供資源的使用報告。

程序提交流程

1.  Client向Yarn提交Application
2.  ResourceManager向NodeManager通信,為Appmaster分配第一個容器
3.  Appmaster對作業進行拆分,向ResourceManager申請容器
4.  Appmaster與NodeManager通信,將作業分發到容器中。
5.  容器向Appmaster發送心跳
6.  程序結束,Appmaster向ResourceManager注銷資源
向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

亚洲午夜精品一区二区_中文无码日韩欧免_久久香蕉精品视频_欧美主播一区二区三区美女