背景:
阅读新闻
Hadoop2.2.0版本多节点集群及Eclipse开发环境搭建
[日期:2014-01-01] 来源:Linux社区 作者:hadoop_ [字体:]
3、修改主机名(hostname)、hosts
vi /etc/hostname
改为:master
vi /etc/hosts
如下图所示:
4、关闭防火墙:ufw disable
5、安装Hadoop2.2.0本文将下载的hadoop-2.2.tar.gz解压到了/home/hadoop路径下
5.1在master本地文件系统创建以下文件夹:
~/dfs/name
~/dfs/data
~/temp
5.2修改hadoop配置文件
1)hadoop-env.sh
修改JAVA_HOME值:
export JAVA_HOME=/usr/local/java/jdk1.6.0_45
2)、yarn-env.sh
修改JAVA_HOME值:
export JAVA_HOME=/usr/local/java/jdk1.6.0_45
3)、slaves
加入:slave1
4)、core-site.xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://master:9000</value>
</property>
<property>
<name>io.file.buffer.size</name>
<value>131072</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>file:/home/hadoop/temp</value>
<description>Abase for other temporary directories.</description>
</property>
<property>
<name>hadoop.proxyuser.hadoop.hosts</name>
<value>*</value>
</property>
<property>
<name>hadoop.proxyuser.hadoop.groups</name>
<value>*</value>
</property>
</configuration>
在GPU上运行Hadoop任务?ParallelX或许将...
Hadoop集群中的Mahout-distribution-0.7安装与配置
相关资讯
本文评论 查看全部评论 (0)
尊重网上道德,遵守中华人民共和国的各项有关法律法规 承担一切因您的行为而直接或间接导致的民事或刑事法律责任 本站管理人员有权保留或删除其管辖留言中的任意内容 本站有权在网站内转载或引用您的评论 参与本评论即表明您已经阅读并接受上述条款
评论声明
最新资讯