收藏私塾在线
 

欢迎您来到私塾在线网!   

请登录! 

免费注册 


hadoop的笔记
状态: 离线
人气:3430043
访问用户量:3108
笔记经验:
总积分:1409
级别:普通会员
搜索本笔记
ta的交流分类
ta的交流主题贴(89)
ta的所有交流贴(96)
ta的全部笔记
全部笔记(163)
未分类笔记(0)
hadoop(62)
luoli的Hado……(18)
精通hadoop(7)
Hadoop原理与代……(1)
HBase(6)
深入浅出学Hive(11)
Hadoop实战-中……(11)
Hadoop实战-初……(8)
hadoop & h……(2)
Hive(15)
zookeeper(4)
Hadoop Str……(7)
云计算综合实战项目(11)
存档
2013-04(11)
2012-10(11)
2012-09(10)
2012-08(112)
2012-07(19)

2017-08-29 22:51:25
Hadoop实战-初级部分 之 Shell
浏览(61933)|评论(70)   交流分类:Java开发综合|笔记分类: Hadoop实战-初……

第一部分:Hadoop Bin
后面根据项目的实际需要Hadoop Bin  包括:
Hadoop  hadoop的Shell
hadoop-config.sh 它的作用是对一些变量进行赋值
     HADOOP_HOME(hadoop的安装目录)。
     HADOOP_CONF_DIR(hadoop的配置文件目录)。HADOOP_SLAVES(--hosts指定的文件的地址)
hadoop-daemon.sh 单节点启动
hadoop-daemons.sh 启动slaves.sh和hadoop-daemon.sh
start-all.sh    启动HDFS与MapReduce
start-balancer.sh 启动Hadoop的负载均衡
start-dfs.sh  启动HDFS
start-jobhistoryserver.sh
start-mapred.sh  启动MapReduce
来进行调整。
后面根据项目的实际需要Hadoop Bin  包括:
Hadoop  hadoop的Shell
hadoop-config.sh 它的作用是对一些变量进行赋值
     HADOOP_HOME(hadoop的安装目录)。
     HADOOP_CONF_DIR(hadoop的配置文件目录)。
     HADOOP_SLAVES(--hosts指定的文件的地址)
hadoop-daemon.sh 单节点启动
hadoop-daemons.sh 在所有slaves上运行相同的脚本hadoop-daemon.sh
start-all.sh    启动HDFS与MapReduce
start-balancer.sh 启动Hadoop的负载均衡
start-dfs.sh  启动HDFS
start-jobhistoryserver.sh
start-mapred.sh  启动MapReduce
来进行调整。
stop-all.sh   停止HDFS与MapReduce
stop-balancer.sh 停止做负载均衡
stop-dfs.sh   停止HDFS
stop-jobhistoryserver.sh 停止Job追踪
stop-mapred.sh 停止MapReduce
task-controller
第二部分:Hadoop Shell 基本操作
 
nHadoop shell
  包括:    namenode -format     format the DFS filesystem
           secondarynamenode    run the DFS secondary namenode
           namenode             run the DFS namenode
           datanode             run a DFS datanode
           dfsadmin             run a DFS admin client
           mradmin              run a Map-Reduce admin client
           fsck                 run a DFS filesystem checking utility
           fs                   run a generic filesystem user client
           balancer             run a cluster balancing utility
           fetchdt              fetch  delegation token from the NameNode
           jobtracker           run the MapReduce job Tracker node
           pipes                run a Pipes job
tasktracker          run a MapReduce task Tracker node
  historyserver        run job history servers as a standalone daemon
  job                  manipulate MapReduce jobs
  queue                get information regarding JobQueues
  version              print the version
  jar <jar>            run a jar file
  distcp <srcurl> <desturl> copy file or directories recursively
  archive -archiveName NAME -p <parent path> <src>* <dest> create a hadoop archive
  classpath            prints the class path needed to get the
                       Hadoop jar and the required libraries
  daemonlog            get/set the log level for each daemon
 or
  CLASSNAME            run the class named CLASSNAME
 
  私塾在线学习网原创内容,转载请注明出处【 http://sishuok.com/forum/blogPost/list/5457.html
该帖子包含附件,回复帖子后即可下载附件。
浏览(61933)|评论(70)   交流分类:Java开发综合|笔记分类: Hadoop实战-初……

评论(70)
70楼 xiaowaxw  2017-08-29 引用

学习中

69楼 wwqz123  2017-03-19 引用

学习中

68楼 shenjb  2017-03-19 引用

挺好

67楼 hukunfeiguochao  2016-08-19 引用

东西,先全部下载下来再说!老师们辛苦啦!

66楼 1519623220  2016-08-19 引用

学习中 

65楼 刷儿  2016-08-19 引用

学习学习

64楼 我是一只小小小小田  2015-11-22 引用

学习中。。。课程不错

63楼 想你已成习惯  2015-09-15 引用
东西,先全部下载下来再说!老师们辛苦啦!
62楼 kelen121  2015-09-04 引用

不错

61楼 lijuanjuan  2015-08-27 引用

xuexi

60楼 雨后心晴  2015-07-03 引用

学习学习,谢谢楼主

59楼 lianghaoguan  2015-06-24 引用

学习

58楼 wind  2015-04-11 引用

学习中。。。课程不错

57楼 swhscmyns  2015-03-16 引用

感谢分享

56楼 神之心  2014-11-07 引用

非常感谢分享,刚开始接触,希望有所帮助!

55楼 Albert  2014-07-22 引用

相当不错,就是有点简单!!!

54楼 归去来辞  2014-06-09 引用

12322

53楼 qazwer1314123  2014-05-22 引用

学习中

52楼 rguon8866  2014-03-12 引用

谢谢分享..不错  必须看.

请登录后评论 登录

关于我们 | 联系我们 | 用户协议 | 私塾在线服务协议 | 版权声明 | 隐私保护

版权所有 Copyright(C)2009-2012 私塾在线学习网