网上搭建Hadoop + Zookeeper + HBase平台的文章可以说是铺天盖地的,非常的多,在这里就把自己配置这个平台时候留下的一个非常基础的文档发出来,供大家指点学习,有问题欢迎大家提出。
先从最基本的配置Hadoop平台开始。
l 首先配置主机名称和ip地址、还有主机名与ip地址对应的hosts文件。
最终配置成的节点的ip地址分布如下:
机器名称
IP地址
Master.Hadoop
192.168.117.122
Slave1.Hadoop
192.168.117.121
Slave2.Hadoop
192.168.117.120
1. 查看当前的主机名称:
2. 修改当前主机的名称:
之前有文档时用命令:hostname。
发现reboot之后的效果如图:
原来用hostname修改主机名只是适用于本次操作。如果reboot之后主机名会恢复成 /etc/sysyconfig/network中的HOSTNAME的值。
修改主机名继续。修改主机名需要切换到root用户,普通用户是无法修改/etc文件夹里面的文件的。修改之后不能保存,提示为只读。
切换用户。重新修改HOSTNAME值,然后reboot主机就可以永久的修改主机名了。
3. 修改当前主机的ip地址
Ip地址信息存储在 /etc/sysconfig/network-scripts文件夹下,需要对ifcfg-eth0文件进行配置。如图所示:
修改完毕之后可以用ifconfig命令查看。
此处不再切图,查看一下就ok。
4. 配置hosts文件
/etc/hosts 这个文件时用来配置主机将要用到的DNS服务器信息的。用户连接集群内的主机名的时候,查看该主机名对应的IP地址。
在/etc/hosts中添加下列的信息,并且其他的两个主机也要这样配置。
192.168.117.122
Master.Hadoop
192.168.117.121
Slave1.Hadoop
192.168.117.120
Slave2.Hadoop
修改master节点的情况如下:
测试结果:
说明配置成功。
5. 把上面的1-4的配置以同样的方式配置到Slave1.Hadoop和Slave2.Hadoop两个节点中去
l 所需要的软件
1. JDK软件
JDK版本:jdk-7u45-linux-i586.tar.gz
下载地址:Oracle.com/technetwork/Java/javase/downloads/jdk7-downloads-1880260.html
相关阅读:
Ubuntu 13.04上搭建Hadoop环境
Ubuntu 12.10 +Hadoop 1.2.1版本集群配置
搭建Hadoop环境(在Winodws环境下用虚拟机虚拟两个Ubuntu系统进行搭建)