Cómo configurar alta disponibilidad para Resource Manager - Parte 6


YARN es la capa de procesamiento de Hadoop, que consta de los servicios maestro (administrador de recursos) y esclavo (administrador de nodos) para procesar los datos. Resource Manager (RM) es el componente crítico responsable de la asignación y administración de recursos entre todos los trabajos que se ejecutan en Hadoop Cluster.

Siempre se recomienda y se recomienda tener habilitada la alta disponibilidad del clúster (HA) en servicios críticos como Namenode y Resource Manager.

  • Mejores prácticas para implementar Hadoop Server en CentOS/RHEL 7 - Parte 1
  • Configuración de requisitos previos de Hadoop y refuerzo de la seguridad: parte 2
  • Cómo instalar y configurar Cloudera Manager en CentOS/RHEL 7 - Parte 3
  • Cómo instalar CDH y configurar ubicaciones de servicios en CentOS/RHEL 7 - Parte 4
  • Cómo configurar la alta disponibilidad para Namenode - Parte 5

En este artículo, veremos los pasos para habilitar la alta disponibilidad en Resource Manager.

Habilitación de la alta disponibilidad en Resource Manager

1. Vaya a Cloudera Manager en las siguientes direcciones y navegue hasta YARN -> Acciones -> Habilitar alta disponibilidad.

http://13.233.129.39:7180/cmf/home

2. Seleccione un servidor donde va a tener un segundo Administrador de recursos. Por lo general, tendremos un segundo servidor maestro para implementar la alta disponibilidad. Aquí, estamos seleccionando master2 para habilitar HA.

3. Una vez seleccionado el master2, haga clic en "Continuar" para continuar.

4. Se iniciará el proceso de habilitación de HA. Puede ver las operaciones en segundo plano haciendo clic en cada paso.

5. Una vez que se completen todos los procesos, obtendrá el estado "Finalizado". Haga clic en "Finalizar".

6. Verifique la alta disponibilidad de Resource Manager viendo las instancias de Yarn en Cloudera Manager -> YARN -> Instancias.

Puede ver dos administradores de recursos, uno estará en el estado "Activo", el otro estará en "En espera".

En este artículo, hemos seguido el procedimiento paso a paso para habilitar la alta disponibilidad en Resource Manager. Siempre que el administrador de recursos activo se apaga, el administrador de recursos en espera se activará para que la producción no tenga interrupciones.