Hadoop添加datanode或者tasktracker节点(2)

3. 在Hadoop集群节点上配置 

3.1 修改hosts节点

把新的集群节点的主机名和IP对应关系都放到hosts,便于本地解析
# sudo vim /etc/hosts
增加如下行:
192.168.88.171 hadoop01
192.168.88.172 hadoop02

192.168.88.173 hadoop03

可以通过ping <主机名>做简单测试

3.2 添加ssh免密码认证

方法和2.4.4 中的方法是一致的。

3.3 修改conf/slave

$ vim conf/slaves

hadoop02
hadoop03

3.4 同步配置文件到新节点上

[xiaoyu@hadoop01 hadoop-1.1.2]$ scp -r conf hadoop03:~/hadoop-1.1.2/

log4j.properties 100% 4441 4.3KB/s 00:00

capacity-scheduler.xml 100% 7457 7.3KB/s 00:00

configuration.xsl 100% 535 0.5KB/s 00:00

fair-scheduler.xml 100% 327 0.3KB/s 00:00

hdfs-site.xml 100% 319 0.3KB/s 00:00

slaves 100% 18 0.0KB/s 00:00

ssl-server.xml.example 100% 1195 1.2KB/s 00:00

hadoop-policy.xml 100% 4644 4.5KB/s 00:00

taskcontroller.cfg 100% 382 0.4KB/s 00:00

mapred-queue-acls.xml 100% 2033 2.0KB/s 00:00

ssl-client.xml.example 100% 1243 1.2KB/s 00:00

masters 100% 9 0.0KB/s 00:00

core-site.xml 100% 441 0.4KB/s 00:00

hadoop-env.sh 100% 2271 2.2KB/s 00:00

hadoop-metrics2.properties 100% 1488 1.5KB/s 00:00

mapred-site.xml 100% 261 0.3KB/s 00:00

 

4. 启动新节点

 

4.1 在新节点启动集群服务

[xiaoyu@hadoop03 hadoop-1.1.2]$ bin/hadoop-daemon.sh start datanode
starting datanode, logging to /home/xiaoyu/hadoop-1.1.2/libexec/../logs/hadoop-xiaoyu-datanode-hadoop03.out
[xiaoyu@hadoop03 hadoop-1.1.2]
$ bin/hadoop-daemon.sh start tasktracker

starting tasktracker, logging to /home/xiaoyu/hadoop-1.1.2/libexec/../logs/hadoop-xiaoyu-tasktracker-hadoop03.out

 

5. 检查新节点的启动情况

 

在这里hadoop01为namenode节点

这里有三种方法,当然执行命令的方法最简便。

5.1 Namenode状态页面::50070

183231342.png

具体信息如下图

183232222.png

5.2 Jobtracker状态页面::50030

183230947.png

具体信息如下图:

183229857.png

linux

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处:http://www.heiqu.com/1d1e77abfcc987377e70b06665648761.html