0
点赞
收藏
分享

微信扫一扫

大数据之-Hadoop3.x_Yarn_生产环境核心参数配置---大数据之hadoop3.x工作笔记0148

weipeng2k 2022-01-17 阅读 69

首先我们看这个ResourceManager,首先配置调度器,

yarn.resourcemanager.scheduler.class 注意,默认是容量调度器,中小企业用容量调度器,

如果是大型企业,用公平调度器,注意FIFO这个调度器几乎没人用.


 

然后再设置yarn.resourcemanager.scheduler.client.thread-count 这个是,resourcemanager 能接受发过来的请求的处理的

线程的个数.

这个个数比如如果有1000个的话,那么如果请求只有50个,那么这时候开1000个线程肯定浪费,但如果只开一个,如果请求

有1000个会同时来,那么也不合理,怎么设置合理后面会说

举报

相关推荐

0 条评论