宿主机硬件配置
运行环境软硬件环境l 主机操作系统:Windows 64 bit,双核4线程,主频2.2G,8G内存
虚拟机软硬件配置
集群网络环境集群包含三个节点:节点之间局域网连接,可以相互ping通。节点IP地址和主机名分布如下:
192.168.58.128 namenode(安装机器)
192.168.58.129 datanode1
192.168.58.130 datanode2
所有节点均是CentOS系统,防火墙iptables均禁用,且在namenode上可以无密码ssh到两个datanode节点
下载bin文件
这里选择Cloudera Manager :
下载Cloudera Manager所需的rpm包
下载网址为:RedHat/6/x86_64/cm/5.3.2/RPMS/x86_64/
安装rpm文件
将下载的rpm包放入文件夹rpm(文件夹名随意)
$cd ./rpm(进入rpm目录)
$yum localinstall –-nogpgcheck *.rpm(安装rpm包)
安装rpm文件
进入cloudera-manager-installer.bin的下载目录
$chmod u+x cloudera-manager-installer.bin(给下载的bin文件权限)
执行 ./cloudera-manager-installer.bin(大约十分钟左右)
登录CM
浏览器输入localhost:7180初次登录 用户名:admin 密码:admin
本地Parcel源
通过http服务配置本地Parcel源
$yum install httpd$service httpd start$mkdir /var/www/html/cdh5$mv CDH-5.3.2-1.cdh5.3.2.p0.10-el6.parcel /var/www/html/cdh5$mv manifest.json /var/www/html/cdh5$mv CDH-5.3.2-1.cdh5.3.2.p0.10-el6.parcel.sha1 /var/www/html/cdh5$chmod -R ugo+rX /var/www/html/cdh5获取Parcel的可以从如下网址获得,下载.parcel文件,manifest.json文件以及.sha1:配置成功后可以查看该文件
配置Parcel源
在安装的过程中配置添加namenode/cdh5/为Parcel为远程仓库,放在远程仓库列表的第一个位置
添加机器
在选择那些机器安装CDH集群时,输入192.168.58.[128-130],查找出三台机器
配置好本地源后,一直点击下一步,出现下面的界面
安装Parcel
选择服务
一直下一步,选择需要安装的服务
集群配置
接下来是集群的配置与执行
登录DashBoard
一切成功后进入系统:
通过Cloudera Manager来安装Hadoop