Búsqueda de sitios web

Cómo configurar la alta disponibilidad para Resource Manager – Parte 6

YARN es la capa de procesamiento de Hadoop, que consta del Maestro (Administrador de recursos) y el Esclavo. Servicios (Node Manager) para procesar los datos. Resource Manager (RM) es el componente crítico responsable de la asignación y gestión de recursos entre todos los trabajos que se ejecutan en Hadoop Cluster.

Siempre se recomienda y es una buena práctica tener la alta disponibilidad (HA) del clúster habilitada en servicios críticos como Namenode y Resource Manager .

Requisitos

  • Mejores prácticas para implementar Hadoop Server en CentOS/RHEL 7 – Parte 1
  • Configuración de requisitos previos de Hadoop y refuerzo de seguridad - Parte 2
  • Cómo instalar y configurar Cloudera Manager en CentOS/RHEL 7 – Parte 3
  • Cómo instalar CDH y configurar ubicaciones de servicios en CentOS/RHEL 7 – Parte 4
  • Cómo configurar la alta disponibilidad para Namenode - Parte 5

En este artículo, veremos los pasos para habilitar la alta disponibilidad en el Administrador de recursos.

Habilitación de la alta disponibilidad en Resource Manager

1. Vaya a Cloudera Manager en las siguientes direcciones y navegue hasta YARN –> Acciones –> Habilite la alta disponibilidad.

http://13.233.129.39:7180/cmf/home

2. Selecciona un servidor donde vas a tener un segundo Administrador de Recursos. Por lo general, tendremos un segundo servidor maestro para implementar la alta disponibilidad. Aquí, seleccionamos master2 para habilitar HA.

3. Una vez seleccionado el master2, haga clic en "Continuar" para continuar.

4. Se iniciará el proceso de habilitación de HA. Puede ver las operaciones en segundo plano haciendo clic en cada paso.

5. Una vez que se completen todos los procesos, obtendrá el estado "Terminado". Haga clic en "Finalizar".

6. Verifique la alta disponibilidad del Resource Manager viendo las instancias de Yarn en Cloudera Manager –> YARN –> Instancias.

Puede ver dos Administradores de recursos, uno estará en el estado "Activo" y el otro estará en "En espera".

Conclusión

En este artículo, hemos analizado el procedimiento paso a paso para habilitar la alta disponibilidad en el Administrador de recursos. Siempre que el Administrador de recursos activos deje de funcionar, el Administrador de recursos en espera pasará a ser Activo para que la producción no tenga una interrupción.