设为首页 加入收藏

TOP

Hadoop命令大全(三)
2014-11-24 03:31:05 来源: 作者: 【 】 浏览:3
Tags:Hadoop 命令 大全
history output-dir 这条命令会显示作业的细节信息,失败和终止的任务细节。 4、关于作业的更多细节,比如成功的任务,以及对每个任务的所做的尝试次数等可以用下面的命令查看 $ bin/hadoop job -history all output-dir 5、 格式化一个新的分布式文件系统: $ bin/hadoop namenode -format 6、在分配的NameNode上,运行下面的命令启动HDFS: $ bin/start-dfs.sh bin/start-dfs.sh脚本会参照NameNode上${HADOOP_CONF_DIR}/slaves文件的内容,在所有列出的slave上启动DataNode守护进程。 7、在分配的JobTracker上,运行下面的命令启动Map/Reduce: $ bin/start-mapred.sh bin/start-mapred.sh脚本会参照JobTracker上${HADOOP_CONF_DIR}/slaves文件的内容,在所有列出的slave上启动TaskTracker守护进程。 8、在分配的NameNode上,执行下面的命令停止HDFS: $ bin/stop-dfs.sh bin/stop-dfs.sh脚本会参照NameNode上${HADOOP_CONF_DIR}/slaves文件的内容,在所有列出的slave上停止DataNode守护进程。 9、在分配的JobTracker上,运行下面的命令停止Map/Reduce: $ bin/stop-mapred.sh bin/stop-mapred.sh脚本会参照JobTracker上${HADOOP_CONF_DIR}/slaves文件的内容,在所有列出的slave上停止TaskTracker守护进程。 DFSShell 10、创建一个名为 /foodir 的目录 $ bin/hadoop dfs -mkdir /foodir 11、创建一个名为 /foodir 的目录 $ bin/hadoop dfs -mkdir /foodir 12、查看名为 /foodir/myfile.txt 的文件内容 $ bin/hadoop dfs -cat /foodir/myfile.txt DFSAdmin 13、将集群置于安全模式 $ bin/hadoop dfsadmin -safemode enter 14、显示Datanode列表 $ bin/hadoop dfsadmin -report 15、使Datanode节点 datanodename退役 $ bin/hadoop dfsadmin -decommission datanodename 16、bin/hadoop dfsadmin -help 命令能列出所有当前支持的命令。比如: * -report:报告HDFS的基本统计信息。有些信息也可以在NameNode Web服务首页看到。 * -safemode:虽然通常并不需要,但是管理员的确可以手动让NameNode进入或离开安全模式。 * -finalizeUpgrade:删除上一次升级时制作的集群备份。 17、显式地将HDFS置于安全模式 $ bin/hadoop dfsadmin -safemode 18、在升级之前,管理员需要用(升级终结操作)命令删除存在的备份文件 $ bin/hadoop dfsadmin -finalizeUpgrade 19、能够知道是否需要对一个集群执行升级终结操作。 $ dfsadmin -upgradeProgress status 20、使用-upgrade选项运行新的版本 $ bin/start-dfs.sh -upgrade 21、如果需要退回到老版本,就必须停止集群并且部署老版本的Hadoop,用回滚选项启动集群 $ bin/start-dfs.h -rollback


首页 上一页 1 2 3 下一页 尾页 3/3/3
】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
分享到: 
上一篇Vertica用于时间计算的SQL语句大全 下一篇SQLite函数大全

评论

帐  号: 密码: (新用户注册)
验 证 码:
表  情:
内  容:

·数据库:推荐几款 Re (2025-12-25 12:17:11)
·如何最简单、通俗地 (2025-12-25 12:17:09)
·什么是Redis?为什么 (2025-12-25 12:17:06)
·对于一个想入坑Linux (2025-12-25 11:49:07)
·Linux 怎么读? (2025-12-25 11:49:04)