|
2017-08-29 22:51:25
Hadoop实战-初级部分 之 Shell 浏览(45169)|评论(70) 交流分类:Java|笔记分类: Hadoop实战-初……
私塾在线《深入浅出学
Hadoop-
初级
部分》
——
系列精品教程
第一部分:Hadoop Bin
后面根据项目的实际需要Hadoop Bin 包括:
Hadoop hadoop的Shell
hadoop-config.sh 它的作用是对一些变量进行赋值
HADOOP_HOME(hadoop的安装目录)。
HADOOP_CONF_DIR(hadoop的配置文件目录)。HADOOP_SLAVES(--hosts指定的文件的地址)
hadoop-daemon.sh 单节点启动
hadoop-daemons.sh 启动slaves.sh和hadoop-daemon.sh
start-all.sh 启动HDFS与MapReduce
start-balancer.sh 启动Hadoop的负载均衡
start-dfs.sh 启动HDFS
start-jobhistoryserver.sh
start-mapred.sh 启动MapReduce
来进行调整。
后面根据项目的实际需要Hadoop Bin 包括:
Hadoop hadoop的Shell
hadoop-config.sh 它的作用是对一些变量进行赋值
HADOOP_HOME(hadoop的安装目录)。
HADOOP_CONF_DIR(hadoop的配置文件目录)。
HADOOP_SLAVES(--hosts指定的文件的地址)
hadoop-daemon.sh 单节点启动
hadoop-daemons.sh 在所有slaves上运行相同的脚本hadoop-daemon.sh
start-all.sh 启动HDFS与MapReduce
start-balancer.sh 启动Hadoop的负载均衡
start-dfs.sh 启动HDFS
start-jobhistoryserver.sh
start-mapred.sh 启动MapReduce
来进行调整。
stop-all.sh 停止HDFS与MapReduce
stop-balancer.sh 停止做负载均衡
stop-dfs.sh 停止HDFS
stop-jobhistoryserver.sh 停止Job追踪
stop-mapred.sh 停止MapReduce
task-controller
第二部分:Hadoop Shell 基本操作
nHadoop shell
包括: namenode -format format the DFS filesystem
secondarynamenode run the DFS secondary namenode
namenode run the DFS namenode
datanode run a DFS datanode
dfsadmin run a DFS admin client
mradmin run a Map-Reduce admin client
fsck run a DFS filesystem checking utility
fs run a generic filesystem user client
balancer run a cluster balancing utility
fetchdt fetch delegation token from the NameNode
jobtracker run the MapReduce job Tracker node
pipes run a Pipes job
tasktracker run a MapReduce task Tracker node
historyserver run job history servers as a standalone daemon
job manipulate MapReduce jobs
queue get information regarding JobQueues
version print the version
jar <jar> run a jar file
distcp <srcurl> <desturl> copy file or directories recursively
archive -archiveName NAME -p <parent path> <src>* <dest> create a hadoop archive
classpath prints the class path needed to get the
Hadoop jar and the required libraries
daemonlog get/set the log level for each daemon
or
CLASSNAME run the class named CLASSNAME
私塾在线学习网原创内容,转载请注明出处【 http://sishuok.com/forum/blogPost/list/5457.html
】
该帖子包含附件,回复帖子后即可下载附件。
精品视频课程推荐
Java Web开发理论部分视频教程
Hadoop实战-初级部分视频教程
Spring3开发实战-独家视频教程
Hadoop实战-中高级部分视频教程
云计算综合实战项目视频教程(更新版)
评论(70)
70楼
xiaowaxw
2017-08-29
引用
学习中 学习中 挺好
67楼
hukunfeiguochao
2016-08-19
引用
东西,先全部下载下来再说!老师们辛苦啦!
66楼
1519623220
2016-08-19
引用
学习中 学习学习 学习中。。。课程不错
东西,先全部下载下来再说!老师们辛苦啦!
不错
61楼
lijuanjuan
2015-08-27
引用
xuexi 学习学习,谢谢楼主
59楼
lianghaoguan
2015-06-24
引用
学习 学习中。。。课程不错 感谢分享 非常感谢分享,刚开始接触,希望有所帮助! 相当不错,就是有点简单!!! 12322
53楼
qazwer1314123
2014-05-22
引用
学习中 谢谢分享..不错 必须看. 请登录后评论 登录
|