Hadoop——Yarn 生产环境核心参数

server/2024/10/21 3:23:49/

在这里插入图片描述

1. ResourceManager 相关参数:

  1. yarn.resourcemanager.hostname:ResourceManager 的主机名。
  2. yarn.resourcemanager.webapp.address:ResourceManager 的 Web 应用程序地址。
  3. yarn.resourcemanager.scheduler.address:ResourceManager 的调度器地址。
  4. yarn.resourcemanager.address:ResourceManager 的地址。
  5. yarn.resourcemanager.admin.address:ResourceManager 的管理地址。
  6. yarn.resourcemanager.webapp.https.address:ResourceManager 的安全 Web 应用程序地址(如果启用了 HTTPS)。
  7. yarn.resourcemanager.resource-tracker.address:ResourceManager 的资源跟踪器地址。
  8. yarn.resourcemanager.webapp.https.keystore-file:ResourceManager 的 HTTPS 密钥库文件路径。
  9. yarn.resourcemanager.webapp.https.keystore-password:ResourceManager 的 HTTPS 密钥库密码。
  10. yarn.resourcemanager.webapp.https.ssl.enabled:是否启用 ResourceManager 的 HTTPS 支持。

2. NodeManager 相关参数:

  1. yarn.nodemanager.hostname:NodeManager 的主机名。
  2. yarn.nodemanager.localizer.cache.target-size-mb:本地化缓存的目标大小。
  3. yarn.nodemanager.localizer.cache.cleanup.interval-ms:本地化缓存清理的间隔时间。
  4. yarn.nodemanager.resource.memory-mb:每个 NodeManager 可用的内存总量。
  5. yarn.nodemanager.resource.cpu-vcores:每个 NodeManager 可用的虚拟核心数。
  6. yarn.nodemanager.disk-health-checker.max-disk-utilization-per-disk-percentage:磁盘健康检查器报告的最大磁盘利用率百分比。

3. 调度器相关参数:

  1. yarn.scheduler.maximum-allocation-mb:单个容器可分配的最大内存量。
  2. yarn.scheduler.minimum-allocation-mb:单个容器可分配的最小内存量。
  3. yarn.scheduler.maximum-allocation-vcores:单个容器可分配的最大虚拟核心数。
  4. yarn.scheduler.minimum-allocation-vcores:单个容器可分配的最小虚拟核心数。

4. 应用程序管理相关参数:

  1. yarn.resourcemanager.am.max-attempts:应用程序的最大重试次数。
  2. yarn.resourcemanager.am.max-retries:应用程序的最大重试次数。

5.其他相关参数:

  1. yarn.resourcemanager.monitor.capacity.preemption.total-preemption-per-round:每轮容量抢占的最大数量。

在这里插入图片描述


http://www.ppmy.cn/server/7626.html

相关文章

突破编程_C++_网络编程(Boost.Asio(简介))

1 Boost.Asio 概述 注意:本教程中 Boost.Asio 选用的是 1.80.0 版本。 1.1 基本介绍 Boost.Asio 是一个用于网络和底层 I/O 编程的 C 库,它的核心在于异步输入与输出(Asynchronous Input and Output)。其高效、灵活和平台无关性…

Qt 拖放功能详解:理论与实践并举的深度指南

拖放(Drag and Drop)作为一种直观且高效的用户交互方式,在现代图形用户界面中扮演着重要角色。Qt 框架提供了完善的拖放支持,允许开发者在应用程序中轻松实现这一功能。本篇博文将详细阐述Qt拖放机制的工作原理,结合详…

桐乡上元——新概念英语对高考有用吗?

新概念英语对高考有用吗? 新概念英语是一套经典的教材,从90后开始到现在在上小学的10后,应该都或多或少学过这套教材,说是几代人共同的青春回忆也不夸张,它的地位堪比五年高考三年模拟。它的作者也是国内外英语大咖&a…

windows驱动开发-WDM框架(一)

在前面的文章中解释过,NT5.0之后windows确定了新的架构Windows Driver Model (WDM),在Vista之后又推出了Windows Driver Framework(WDF),这两个都属于驱动程序框架,那么它们的之间的关系是怎样的? WDF是对WDM进行的封…

飞书API(5):查看多维表 28 种数据类型的数据结构

一、引入 前面我们用于测试的数据集其实都是比较常用的数据,比如说文本、数字、单选等,但飞书多维表并不仅仅只有这些数据,截止发文,飞书多维表应用上支持28种数据类型,在数据层面飞书官方只提供了23种数据类型&#…

云原生小疑问 ⁉️ - Kubernetes 下重启容器会丢失数据吗?

文章目录 问题哪些数据需要持久化?解决办法参考 问题 在 docker 环境下,容器重启后还是原来的容器,数据并没有丢失。那是不是 k8s 环境下,重启也不会丢失呢? 在kubernetes/RainBond环境下,最小化的管理单元…

软件杯 深度学习实现行人重识别 - python opencv yolo Reid

文章目录 0 前言1 课题背景2 效果展示3 行人检测4 行人重识别5 其他工具6 最后 0 前言 🔥 优质竞赛项目系列,今天要分享的是 🚩 **基于深度学习的行人重识别算法研究与实现 ** 该项目较为新颖,适合作为竞赛课题方向&#xff0c…

SQL语法基础-其他函数V

SQL语法基础-其他函数V 一、数据类型转换函数二、系统信息函数三、条件表达式函数四、XML相关函数五、JSON函数(从Oracle 12c开始支持) 一、数据类型转换函数 这类函数用于将数据从一种类型转换为另一种类型,非常有用于数据清洗和准备阶段。…