什么是 YARN 的 Container（容器）？它封装了哪些维度的资源？

Question

Accepted Answer

在 Hadoop YARN 架构中，Container（容器） 是一个非常核心的概念。简单来说，它是 YARN 中基本的资源分配单位和任务运行环境。 以下是对 YARN Container 及其封装资源维度的详细解析： 一、 什么是 YARN 的 Container？ 1. 资源的抽象表示：Container 并不是像物理机或虚拟机那样的实体，它是 YARN 资源管理器（ResourceManager）向应用程序（Application）分配资源的一种抽象表示。它代表了某台特定节点（NodeManager）上的一组特定资源。 2. 任务的执行环境：当你在 YARN 上运行一个任务（例如 MapReduce 的 Map/Reduce task，或者 Spark 的 Executor）时，这个任务必须运行在一个 Container 内部。 3. 生命周期：Container 是按需动态创建的。当 ApplicationMaster 申请到资源后，NodeManager 会启动 Container 并运行相关任务；任务结束后，Container 会被销毁，资源被系统回收。 4. 与 D...