Hadoop Yarn常用参数配置项整理

Hadoop Yarn常用参数配置项整理

（1）Resourcemanager 相关 yarn.resourcemanager.scheduler.client.thread-count ResourceManager 处理调度器请求的线程数量yarn.resourcemanager.scheduler.class 配置调度器 （2）Nodemanager 相关 yarn.nodemanager.resource.memory-mb NodeManager 使用内存数yarn.nodemanager.resource.system-reserved-memory-mb NodeManager 为系统保留多少内存，和上一个参数二者取一即可yarn.nodemanager.resource.cpu-vcores NodeManager 使用 CPU 核数yarn.nodemanager.resource.count-logical-processors-as-cores 是否将虚拟核数当作 CPU 核数yarn.nodemanager.resource.pcores-vcores-multiplier 虚拟核数和物理核数乘数，例如：4 核 8 线程，该参数就应设为 2yarn.nodemanager.resource.detect-hardware-capabilities 是否让 yarn 自己检测硬件进行配置yarn.nodemanager.pmem-check-enabled 是否开启物理内存检查限制 containeryarn.nodemanager.vmem-check-enabled 是否开启虚拟内存检查限制 containeryarn.nodemanager.vmem-pmem-ratio 虚拟内存物理内存比例 （3）Container 容器相关 yarn.scheduler.minimum-allocation-mb 容器最小内存yarn.scheduler.maximum-allocation-mb 容器最大内存yarn.scheduler.minimum-allocation-vcores 容器最小核数yarn.scheduler.maximum-allocation-vcores 容器最大核数

版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。