Hadoopの中でYARNを使用してセッションクラスターを作成する方法は何ですか?

HadoopでYARN Sessionクラスタを作成するには、次の手順を実行します。

  1. ます、HadoopクラスターにYARNをインストールし、設定する必要があります。yarn-site.xmlなどのYARNの設定ファイルに関連パラメータが適切に設定されていることを確認してください。
  2. HadoopクラスターのノードでYARNセッションクラスターのマスターノードを起動します。次のコマンドを使用することができます:
$ start-yarn-session.sh
  1. Masterノードが起動した後、以下のコマンドを使用してSessionクラスターのWorkerノードを起動できます:
$ start-yarn-session.sh -n <numWorkers>

は起動するWorkerノードの数を示している。

  1. Sessionクラスターの状態を確認するためには、以下のコマンドを使用してください。
$ yarn-session.sh -s
  1. YARNセッションクラスターを使用して計算タスクを実行する場合、YARNにジョブを提出することができます。以下のコマンドを使用してジョブを提出できます:
$ yarn-session.sh -f <jobFile>

は提出する課題ファイルです。

上記の手順を実行することで、Hadoop内でYARNセッションクラスターを作成し、計算タスクを実行することができます。

コメントを残す 0

Your email address will not be published. Required fields are marked *


广告
広告は10秒後に閉じます。
bannerAds