hadoop的一些基本用法
来源:互联网 发布:公司数据管理软件 编辑:程序博客网 时间:2024/06/11 09:55
启动Hadoop
- 进入HADOOP_HOME目录。
- 执行sh bin/start-all.sh
关闭Hadoop
- 进入HADOOP_HOME目录。
- 执行sh bin/stop-all.sh
1、查看指定目录下内容
hadoop dfs –ls [文件目录]
eg: hadoop dfs –ls /user/
2、打开某个已存在文件
hadoop dfs –cat [file_path]
eg:hadoop dfs -cat /user/susu
3、将本地文件存储至hadoop
hadoop fs –put [本地地址] [hadoop目录]
Eg:hadoop fs –put /home/susu/text.txt /user/susu/text.txt
(text.txt是文件名)
4、将本地文件夹存储至hadoop
hadoop fs –put [本地目录] [hadoop目录]
eg: hadoop fs –put /home/susu/dir_name /user/text.txt
(dir_name是文件夹名)
5、将hadoop上某个文件down至本地已有目录下
hadoop fs -get [文件目录] [本地目录]
eg:hadoop fs –get /user/susu/ok.txt /home/susu
6、删除hadoop上指定文件
Hadoop fs –rm [文件地址]
Eg: hadoop fs –rm /user/susu/text.txt
7、删除hadoop上指定文件夹(包含子目录等)
Hadoop fs –rm [目录地址]
Eg:hadoop fs –rmr /user/susu
8、在hadoop指定目录内创建新目录
hadoop fs –mkdir /user/susu
9、在hadoop指定目录下新建一个空文件
使用touchz命令:
hadoop fs -touchz /user/text.txt
10、将hadoop上某个文件重命名
使用mv命令:
hadoop fs –mv /user/test.txt /user/susu.txt (将test.txt重命名为susu.txt )
11、将hadoop指定目录下所有内容保存为一个文件,同时down至本地
Hadoop dfs –getmerge /user /home/susu
12、将正在运行的hadoop作业kill掉
Hadoop job –kill [job-id]
13、检查文件是否存在
hadoop fs -test -e /home/susu/text.txt
14、检查文件是否为0字节
hadoop fs -test -z /home/susu/text.txt
15、检查路径是否是目录
hadoop fs -test -d /home/susu
- hadoop的一些基本用法
- hadoop的一些基本问题
- Log4的一些基本用法
- ListBox的一些基本用法
- Hibernate的一些基本用法
- Git 的一些基本用法
- UITableView的一些基本用法
- UIButton的一些基本用法
- #define 的一些基本用法
- intent的一些基本用法
- Thread一些基本的用法
- UIWebView 的一些基本用法
- NSUserDefaults的一些基本用法
- Jquery的一些基本用法
- path的一些基本用法
- 广播的一些基本用法
- Tensorflow的一些基本用法
- C++的一些基本用法
- android 获取本机的一些信息(imsi,imei....不断更新中)
- ruby之——安装gem提示:Please update your PATH to include build tools or download the DevKit
- android 调用系统的activity
- AVI格式介绍
- C++ 初学者指南 第三篇 (2) 项目3-1
- hadoop的一些基本用法
- 修改进程权限(转载)
- ffmpeg 获取视频关键帧
- ERROR 1005: Can't create table (errno: 121)
- 字符谜题之1:最后的笑声(之所以说是最后的笑声,是因为输出两个Ha,第二个出问题)
- IPOL上的non-local means源程序的移植过程
- ubuntu虚拟化技术OpenVZ
- C语言运算符优先级 详细列表
- 正式使用groovy来单元测试