2023學年完整公開課版Application生命周期

Application生命周期2學習任務Yarn的執(zhí)行流程YarnApplication3知識目標了解Yarn的執(zhí)行流程。了解YarnApplication的用途。01能力目標學會YarnApplication命令的用法。學會編寫Yarn上運行的程序。02學習目標4目錄01Yarn的執(zhí)行流程02YarnApplication的命令03編寫Yarn上運行的程序Yarn的執(zhí)行流程5YarnApplication命令6-list：列出所有Application信息。

示例：yarn

application–list-appStates<States>：跟-list一起使用，用來篩選不同狀態(tài)的application，多個用“,”分隔；

所有狀態(tài)：ALL,NEW,NEW_SAVING,SUBMITTED,ACCEPTED,RUNNING,FINISHED,FAILED,KILLED

示例：yarn

application-list-appStates

RUNNING-appTypes<Types>：跟-list一起使用，用來篩選不同類型的application，多個用“,”分隔；

如MAPREDUCE

示例：yarn

application-list-appTypes

MAPREDUCEYarnApplication命令7-kill<ApplicationID>：殺死一個application，需要指定一個

ApplicationID

。

示例：yarn

application-killapplication_1526100291229_206393-status<ApplicationID>：列出某個application的狀態(tài)

示例：yarn

application-status

application_1526100291229_206393-movetoqueue<ApplicationID>

：移動application到其他的queue，不能單獨使用。-queue<QueueName>：與movetoqueue命令一起使用，指定移動到哪個queue。

示例：yarn

application-movetoqueueapplication_1526100291229_206393-queueother編寫Yarn上運行的程序-client設計8客戶端通過RPC與ResourceManager通信獲取appId和可分配的資源等信息?？蛻舳送ㄟ^RPC將ApplicationMaster提交到ResourceManager?？蛻舳藢覣pplicationMaster所需要的信息打包到ApplicationSubmisionContext中。主要包括application_id、name、priority、queue、user、unmanagered_am等。也需要提供ApplicationClient接口實現(xiàn)，以供返回信息，包括集群信息、節(jié)點信息、kill信息、運行狀態(tài)。當然這些程序可以使用Java的RPC進行編程，Yarn提供了YarnClient類的封裝編程庫，使用maven載入。編寫Yarn上運行的程序-ApplicationMaster設計9ApplicationMaster通過RPC向ResourceManager注冊注冊成功后收到一個RegisterApplicationMasterResponse返回值，主要信息有maximumCapability最大可用資源、client_to_am_token_master_key等信息。ApplicationMaster通過RPC向ResourceManager申請資源。ApplicationMaster調(diào)用后會收到AllocationResponse類型返回信息。主要包括reponse_id、allocated_containers、limit、狀態(tài)等信息。Applicati