Hadoop集群默认配置和常用配置(2)

/dfs/namesecondary

  core-site.xml   /hadoop/hdfs/namesecondary  
fs.checkpoint.edits.dir   secondary NameNode的事务文件存储的目录,以,号隔开,hdfs会把事务文件冗余复制到这些目录   ${fs.checkpoint.dir}   core-site.xml   ${fs.checkpoint.dir}  
hadoop.tmp.dir   临时目录,其他临时目录的父目录   /tmp/hadoop-${user.name}   core-site.xml   /hadoop/tmp/hadoop-${user.name}  
dfs.data.dir   data node的数据目录,以,号隔开,hdfs会把数据存在这些目录下,一般这些目录是不同的块设备,不存在的目录会被忽略掉  

${hadoop.tmp.dir}

/dfs/data

  hdfs-site.xm  

/hadoop/hdfs/data1/data,

/hadoop/hdfs/data2/data

 
mapred.local.dir   MapReduce产生的中间数据存放目录,以,号隔开,hdfs会把数据存在这些目录下,一般这些目录是不同的块设备,不存在的目录会被忽略掉  

${hadoop.tmp.dir}

/mapred/local

  mapred-site.xml  

/hadoop/hdfs/data1/mapred/local,

/hadoop/hdfs/data2/mapred/local

 
mapred.system.dir   MapReduce的控制文件  

${hadoop.tmp.dir}

/mapred/system

  mapred-site.xml   /hadoop/hdfs/data1/system  
其他配置 参数   描述   默认   配置文件   例子值  
dfs.support.append   支持文件append,主要是支持hbase   false   hdfs-site.xml   true  
dfs.replication   文件复制的副本数,如果创建时不指定这个参数,就使用这个默认值作为复制的副本数   3   hdfs-site.xml   2  

内容版权声明:除非注明,否则皆为本站原创文章。

转载注明出处:http://www.heiqu.com/279b4c5bdb1bc553bca9dba65e204a56.html