1. hadoop3.x yarn介绍

2. hadoop3.x yarn工作流程

3. hadoop3.x yarn 内存配置

4. hadoop3.x yarn 资源调度（Scheduler和队列）

   • hadoop3.x yarn 调度策略：FIFO Scheduler

   • hadoop3.x yarn 调度策略：Capacity Scheduler

   • hadoop3.x yarn 调度策略：Fair Scheduler（公平调度）

   • hadoop3.x yarn 调度策略：Fair Scheduler（公平调度）根据linux登录名提交到队列

   • hadoop3.x yarn 调度策略：Fair Scheduler（公平调度）根据linux登录名创建队列

   • hadoop3.x yarn 调度策略：Fair Scheduler（公平调度）根据linux登录名提交到队列（分配策略queuePlacementPolicy）

   • hadoop3.x Capacity Scheduler 和 Fair Scheduler

其他

1. yarn常用命令：查看任务信息、查看任务状态、终止任务（kill）

2. hadoop3.x Fair Scheduler 公平调度队列内存和yarn.nodemanager.resource.memory-mb的关系

3. hadoop3.x yarn内存、CPU配置

4. hadoop3.x /tmp 需要 777 权限

常见错误

1. org.apache.hadoop.security.AccessControlException: Permission denied: user=dev, access=EXECUTE, inode=

2. Failed to submit application_to YARN : User dev cannot submit applications to queue root.dev(requested queuename is default)

3. Container exited with a non-zero exit code 1. Error file: prelaunch.err. Last 4096 bytes of prelaunch.err : Last 4096 bytes of stderr : log4j:WARN No appenders could be found for logger