Ubuntu 11.04 下Hadoop学习笔记(2)

日期：2021-03-23 栏目：程序人生浏览：次

首页 → 服务器应用

背景：

阅读新闻

Ubuntu 11.04 下Hadoop学习笔记

Hadoop相关命令

[日期：2012-05-29] 来源：Linux社区作者：qyongkang [字体：]

hdfs相关操作
Hadoop使用的是HDFS,能够实现的功能和我们使用的磁盘类似

1、查看文件列表

./hadoop fs -ls

@linuxidc:~/tools/hadoop-1.0.2/bin$ ./hadoop fs -ls
Warning: $HADOOP_HOME is deprecated.

Found 10 items
-rw-r--r--   3 yongkang.qiyk supergroup      16536 2012-05-23 21:57 /user/yongkang/epl-v10.html
-rw-r--r--   1 yongkang      supergroup       4336 2012-05-22 13:20 /user/yongkang/hadoop-daemon.sh
-rw-r--r--   1 yongkang      supergroup       1166 2012-05-22 12:44 /user/yongkang/start-all.sh
drwxr-xr-x   - yongkang      supergroup          0 2012-05-22 12:43 /user/yongkang/test
drwxr-xr-x   - yongkang      supergroup          0 2012-05-22 13:04 /user/yongkang/test-in
drwxr-xr-x   - yongkang      supergroup          0 2012-05-23 19:36 /user/yongkang/test-out11
drwxr-xr-x   - yongkang      supergroup          0 2012-05-22 13:06 /user/yongkang/test-out2
drwxr-xr-x   - yongkang      supergroup          0 2012-05-22 13:16 /user/yongkang/test-out3
drwxr-xr-x   - yongkang      supergroup          0 2012-05-22 13:17 /user/yongkang/test-out4
drwxr-xr-x   - yongkang.qiyk supergroup          0 2012-05-28 10:55 /user/yongkang/test-out5

2.创建文件目录
./hadoop fs -mkdir test2

3.删除文件目录以及文件

@linuxidc:~/tools/hadoop-1.0.2/bin$ ./hadoop fs -rmr test2
Warning: $HADOOP_HOME is deprecated.

Deleted hdfs://master:9000/user/yongkang/test2

4.删除文件

@linuxidc:~/tools/hadoop-1.0.2/bin$ ./hadoop fs -rm hadoop-daemon.sh
Warning: $HADOOP_HOME is deprecated.

Deleted hdfs://master:9000/user/yongkang/hadoop-daemon.sh

5.上传文件

如@linuxidc:~/tools/hadoop-1.0.2/bin$ ./hadoop fs -put stop-dfs.sh .

6.下载文件

@linuxidc:~/tools/hadoop-1.0.2/bin$ hadoop fs -get start-all.sh start-all.sh_bak

将start-all.sh 下载到当前目录名字为start-all.sh_bak