新增节点

新增节点完成新节点信息配置后,需分发配置文件至所有节点。

  1. 添加新节点hostname至Hadoop的“$HADOOP_HOME/etc/hadoop/workers”中,此处以节点agent04为例。分发该文件至所有节点。
  2. 远程登录新加入的节点,启动节点管理器。

    若对节点进行重启操作,也需进行节点管理器启动和节点信息刷新,Yarn会自启动OCKD进程。

    yarn-daemon.sh start nodemanager

    刷新节点信息,刷新后结果如图1所示。

    yarn rmadmin -refreshNodes
    图1 节点信息

  3. 配置节点类型。

    • 新增节点为RSS节点。
      yarn rmadmin -replaceLabelsOnNode "agent04=RSS"
    • 新增节点为ESS节点。
      yarn rmadmin -replaceLabelsOnNode "agent04="

  4. 添加新节点hostname至“/home/ockadmin/opt/ock/conf/ock_node_list”中,此处以节点agent04为例。编辑完成并保存后分发该文件至所有节点。

    执行以下命令查看所有节点和标签信息。

    yarn node -list -all -showDetails