Hvordan sette opp høy tilgjengelighet for ressursbehandler – del 6

GARN er Processing Layer of Hadoop, som består av Master (Resource Manager) og Slave (Node Manager) tjenester for å behandle dataene. Ressursadministrator (RM) er den kritiske komponenten som er ansvarlig for ressursallokering og styring blant alle jobbene som kjører i Hadoop Cluster.

Det er alltid anbefalt og beste praksis å ha Cluster High Availability (HA) aktivert på Kritiske tjenester som Namenode og Resource Manager<.

Krav

  • Beste praksis for distribusjon av Hadoop Server på CentOS/RHEL 7 – Del 1
  • Sette opp Hadoop-forutsetninger og sikkerhetsherding – del 2
  • Hvordan installere og konfigurere Cloudera Manager på CentOS/RHEL 7 – Del 3
  • Hvordan installere CDH og konfigurere tjenesteplasseringer på CentOS/RHEL 7 – Del 4
  • Hvordan sette opp høy tilgjengelighet for Namenode – del 5

I denne artikkelen vil vi se fremgangsmåten for å aktivere Høy tilgjengelighet på Ressursbehandling.

Aktiverer høy tilgjengelighet på Resource Manager

1. Gå til Cloudera Manager på følgende adresser og naviger til GARN –> Handlinger –> Aktiver høy tilgjengelighet.

http://13.233.129.39:7180/cmf/home

2. Velg en server der du skal ha en andre Ressursadministrator. Vanligvis vil vi ha en andre hovedserver for å distribuere High Availability. Her velger vi master2 for å aktivere HA.

3. Når du har valgt master2, klikker du på «Fortsett» for å fortsette.

4. Aktivering av HA-prosessen vil bli startet. Du kan se bakgrunnsoperasjonene ved å klikke på hvert trinn.

5. Når alle prosessene er fullført, får du statusen «Ferdig». Klikk Fullfør.

6. Bekreft Resource Manager høy tilgjengelighet ved å se Yarn-forekomstene på Cloudera Manager –> YARN –> Forekomster.

Du kan se to Ressursbehandler, en vil være i tilstanden «Aktiv», en annen vil være i «Standby».

Konklusjon

I denne artikkelen har vi gått gjennom trinnvis prosedyre for å aktivere Høy tilgjengelighet på Ressursbehandler. Hver gang Active Resource Manager går ned, vil Ressursbehandleren i ventemodus bli Aktiv slik at produksjonen ikke går i stå.