设为首页 加入收藏

TOP

hdfs和yarn常规命令
2019-02-25 00:14:32 】 浏览:61
Tags:hdfs yarn 常规 命令

bin/hdfs dfsadmin -safemode leave #让namenode退出安全模式

hadoop dfsadmin -safemode leave #退出安全模式

hadoop fs -mkdir -p /flowsum/input 建input文件夹

hadoop fs -put flow.data /flowsum/input 数据放入input文件夹里

hadoop fs -ls /flowsum/output 查看处理好的书籍列表‘

hadoop fs -cat /flowsum/output/part-r-00000

hadoop fs -ls hdfs://hadoop-server01:9000/ 查看hdfs文件

hadoop fs -ls / 查看hdfs文件

hadoop fs -mkdir -p /aaa/bbb/cc/dd 创建hdfs文件

hadoop fs -moveFromLocal /home/hadoop/a.txt /aaa/bbb/cc/dd #从本地剪切粘贴到hdfs

hadoop fs -moveToLocal /aaa/bbb/cc/dd /home/hadoop/a.txt #从hdfs剪切粘贴到本地

hadoop fs -appendToFile ./hello.txt hdfs://hadoop-server01:9000/hello.txt #追加一个文件到已经存在的文件末尾

Hadoop fs -appendToFile ./hello.txt /hello.txt

hadoop fs -cat /hello.txt #显示文件内容

hadoop fs -tail /weblog/access_log.1 #显示一个文件的末尾

hadoop fs -text /weblog/access_log.1 #以字符形式打印一个文件的内容

hadoop fs -chmod 666 /hello.txt #对文件所属权限

hadoop fs -chown someuser:somegrp /hello.txt #对文件所属权限

hadoop fs -copyFromLocal ./jdk.tar.gz /aaa/ #从本地复制粘贴到hdfs

hadoop fs -copyToLocal /aaa/jdk.tar.gz #从hdfs复制粘贴到本地

hadoop fs -cp /aaa/jdk.tar.gz /bbb/jdk.tar.gz.2 #从hdfs的一个路径拷贝hdfs的另一个路径

hadoop fs -mv /aaa/jdk.tar.gz / #在hdfs目录中移动文件

hadoop fs -get /aaa/jdk.tar.gz #就是从hdfs下载文件到本地

hadoop fs -getmerge /aaa/log.* ./log.sum #合并下载多个文件

hadoop fs -rm -r /aaa/bbb/ #删除文件或文件夹

hadoop fs -rmdir /aaa/bbb/ccc #删除空目录

hadoop fs -df -h / #统计文件系统的可用空间信息

hadoop fs -du -s -h /aaa/* #统计文件夹的大小信息

hadoop fs -count /aaa/ #统计一个指定目录下的文件节点数量

hadoop fs -setrep 3 /aaa/jdk.tar.gz #设置hdfs中文件的副本数量

yarn application -kill $ApplicationId #杀死mapreduce作业

yarn application -list #查看mapreduce作业

】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇Spark 读取HDFS存入 HBase(1.0.0.. 下一篇【HDFS篇】eclipse下开发hadoop配..

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目