Vyhledávání na webu

Jak nastavit vysokou dostupnost pro správce zdrojů – část 6


YARN je zpracovatelská vrstva Hadoop, která se skládá z hlavního (správce zdrojů) a podřízeného (Node Manager) služby pro zpracování dat. Správce zdrojů (RM) je kritická součást, která je zodpovědná za alokaci a správu zdrojů mezi všemi úlohami spuštěnými v Hadoop Cluster.

Vždy se doporučuje a osvědčený postup mít u kritických služeb, jako jsou Namenode a Správce zdrojů<, povolenou Vysokou dostupnost clusteru (HA).

Požadavky

  • Nejlepší postupy pro nasazení serveru Hadoop na CentOS/RHEL 7 – část 1
  • Předpoklady nastavení Hadoopu a zabezpečení – část 2
  • Jak nainstalovat a nakonfigurovat Cloudera Manager na CentOS/RHEL 7 – část 3
  • Jak nainstalovat CDH a nakonfigurovat umístění služeb na CentOS/RHEL 7 – část 4
  • Jak nastavit vysokou dostupnost pro Namenode – část 5

V tomto článku se podíváme na kroky k povolení Vysoká dostupnost ve Správci zdrojů.

Povolení vysoké dostupnosti ve Správci zdrojů

1. Přejděte do Cloudera Manager na následujících adresách a přejděte na YARN –> Akce –> Povolit vysokou dostupnost.

http://13.233.129.39:7180/cmf/home

2. Vyberte server, kde budete mít druhého Správce zdrojů. Obvykle budeme mít druhý hlavní server pro nasazení High Availability. Zde vybíráme master2 pro povolení HA.

3. Jakmile vyberete master2, pokračujte kliknutím na tlačítko Pokračovat.

4. Proces povolení HA bude spuštěn. Kliknutím na jednotlivé kroky můžete zobrazit operace na pozadí.

5. Po dokončení všech procesů získáte stav „Dokončeno“. Klikněte na tlačítko Dokončit.

6. Ověřte vysokou dostupnost Správce zdrojů zobrazením instancí Příze v Cloudera Manager –> YARN –> Instance.

Můžete vidět dva Správce zdrojů, jeden bude ve stavu „Aktivní“, druhý bude v „Pohotovostním režimu“.

Závěr

V tomto článku jsme prošli krok za krokem postupem aktivace Vysoká dostupnost ve Správci zdrojů. Kdykoli se vypne Správce aktivních zdrojů, Správce zdrojů v pohotovostním režimu se stane Aktivním, takže výroba nebude mít výpadek.