ウェブサイト検索

Resource Manager の高可用性をセットアップする方法 – パート 6


YARN は Hadoop の処理層であり、マスター (リソース マネージャー) とスレーブで構成されます。データを処理する (ノード マネージャー) サービス。 リソース マネージャー (RM) は、Hadoop クラスター で実行されているすべてのジョブ間のリソースの割り当てと管理を担当する重要なコンポーネントです。

NamenodeResource Manager< などの重要サービスでクラスタ高可用性 (HA)を有効にすることが常に推奨され、ベスト プラクティスです。

要件

  • CentOS/RHEL 7 に Hadoop サーバーを導入するためのベスト プラクティス – パート 1
  • Hadoop の前提条件のセットアップとセキュリティ強化 - パート 2
  • CentOS/RHEL 7 に Cloudera Manager をインストールして構成する方法 – パート 3
  • CentOS/RHEL 7 に CDH をインストールしてサービス プレースメントを構成する方法 – パート 4
  • Namenode の高可用性をセットアップする方法 – パート 5

この記事では、リソース マネージャー高可用性を有効にする手順について説明します。

Resource Manager での高可用性の有効化

1. 次のアドレスの Cloudera Manager に移動し、YARN –> Actions –> に移動します。高可用性を有効にします。

http://13.233.129.39:7180/cmf/home

2. 2 番目のリソース マネージャーを配置するサーバーを選択します。通常、高可用性を展開するために 2 番目のマスター サーバーが必要になります。ここでは、HA を有効にするために master2 を選択しています。

3. master2 を選択したら、[続行] をクリックして続行します。

4. HA プロセスを有効にするプロセスが開始されます。各ステップをクリックすると、バックグラウンド操作を表示できます。

5. すべてのプロセスが完了すると、「完了」ステータスが表示されます。 [完了] をクリックします。

6. Cloudera Manager –> YARN で Yarn インスタンスを表示して、Resource Manager の高可用性を確認します。 –> インスタンス

2 つのリソース マネージャーが表示されます。1 つは「アクティブ」状態、もう 1 つは「スタンバイ」状態になります。

結論

この記事では、リソース マネージャー高可用性を有効にする手順を段階的に説明しました。 アクティブ リソース マネージャーがダウンすると、 運用が停止しないようにスタンバイ リソース マネージャーアクティブになります。