收藏私塾在线
 

欢迎您来到私塾在线网！   

请登录! 

免费注册 


hadoop的笔记
[头像]
hadoop
状态： 离线
人气：3658232
访问用户量：3104
笔记经验：
总积分：1409
级别：普通会员
搜索本笔记
ta的交流分类
ta的交流主题贴(131)
ta的所有交流贴(138)
ta的全部笔记
全部笔记(249)
未分类笔记(0)
hadoop(109)
luoli的Hado……(19)
精通hadoop(10)
Hadoop原理与代……(6)
HBase(15)
深入浅出学Hive(11)
Hadoop实战-中……(11)
Hadoop实战-初……(8)
hadoop & h……(9)
Hive(18)
zookeeper(8)
Hadoop Str……(14)
云计算综合实战项目(11)
存档
2013-04(11)
2012-10(11)
2012-09(10)
2012-08(191)
2012-07(26)

2017-08-29 22:51:25
 Hadoop实战-初级部分 之 Shell
浏览(54371)|评论(70)   交流分类：Java|笔记分类: Hadoop实战-初……

第一部分：Hadoop Bin
后面根据项目的实际需要Hadoop Bin  包括:
Hadoop  hadoop的Shell
hadoop-config.sh 它的作用是对一些变量进行赋值
     HADOOP_HOME（hadoop的安装目录）。
     HADOOP_CONF_DIR（hadoop的配置文件目录）。HADOOP_SLAVES（--hosts指定的文件的地址）
hadoop-daemon.sh 单节点启动
hadoop-daemons.sh 启动slaves.sh和hadoop-daemon.sh
start-all.sh    启动HDFS与MapReduce
start-balancer.sh 启动Hadoop的负载均衡
start-dfs.sh  启动HDFS
start-jobhistoryserver.sh
start-mapred.sh  启动MapReduce
来进行调整。
后面根据项目的实际需要Hadoop Bin  包括:
Hadoop  hadoop的Shell
hadoop-config.sh 它的作用是对一些变量进行赋值
     HADOOP_HOME（hadoop的安装目录）。
     HADOOP_CONF_DIR（hadoop的配置文件目录）。
     HADOOP_SLAVES（--hosts指定的文件的地址）
hadoop-daemon.sh 单节点启动
hadoop-daemons.sh 在所有slaves上运行相同的脚本hadoop-daemon.sh
start-all.sh    启动HDFS与MapReduce
start-balancer.sh 启动Hadoop的负载均衡
start-dfs.sh  启动HDFS
start-jobhistoryserver.sh
start-mapred.sh  启动MapReduce
来进行调整。
stop-all.sh   停止HDFS与MapReduce
stop-balancer.sh 停止做负载均衡
stop-dfs.sh   停止HDFS
stop-jobhistoryserver.sh 停止Job追踪
stop-mapred.sh 停止MapReduce
task-controller
第二部分：Hadoop Shell 基本操作
 
nHadoop shell
  包括:    namenode -format     format the DFS filesystem
           secondarynamenode    run the DFS secondary namenode
           namenode             run the DFS namenode
           datanode             run a DFS datanode
           dfsadmin             run a DFS admin client
           mradmin              run a Map-Reduce admin client
           fsck                 run a DFS filesystem checking utility
           fs                   run a generic filesystem user client
           balancer             run a cluster balancing utility
           fetchdt              fetch  delegation token from the NameNode
           jobtracker           run the MapReduce job Tracker node
           pipes                run a Pipes job
tasktracker          run a MapReduce task Tracker node
  historyserver        run job history servers as a standalone daemon
  job                  manipulate MapReduce jobs
  queue                get information regarding JobQueues
  version              print the version
  jar <jar>            run a jar file
  distcp <srcurl> <desturl> copy file or directories recursively
  archive -archiveName NAME -p <parent path> <src>* <dest> create a hadoop archive
  classpath            prints the class path needed to get the
                       Hadoop jar and the required libraries
  daemonlog            get/set the log level for each daemon
 or
  CLASSNAME            run the class named CLASSNAME
 
  私塾在线学习网原创内容，转载请注明出处【 http://sishuok.com/forum/blogPost/list/5457.html 】
该帖子包含附件，回复帖子后即可下载附件。
精品视频课程推荐

Hadoop实战-初级部分视频教程
Hadoop初级精品课程，帮助学员快速掌握Hadoop入门到上手开发，并掌握一定的开发技巧。通过Hadoop初级课程，学员可以掌握基本的Hadoop 原理，Hadoop环境搭建，Hadoop Shell，Hadoop HDFS基本操作和编程，Hadoop Mapreduce编程。

深入浅出学Zookeeper
内容概述：本课程深入浅出的讲解Hadoop 体系下的分布式协调组件－Zookeeper,向大家介绍了Zookeeper的原理与使用，深入浅出，结合生动实例，具有很高的实战意味 技术要点：Zookeepr 原理，Zookeeper 架构，Zookeeper 简单使用，Zookeeper Watch等

Hadoop实战-中高级部分视频教程
Hadoop中高级精品课程，帮助学员快速掌握Hadoop HDFS的原理；MapReduce的原理；MapReduce高级编程；Hadoop的IO机制，如序列化、压缩；Hadoop的RPC，RESTFul API等高级特性；彻底理解Hadoop，成为一名合格的云计算开发者。并掌握一些云端基本的运维知识，从而实现开发和运维兼修的高级人才。

Hibernate4实战-独家视频教程
ORMapping的原理、1+N次问题、版本并发控制、开发的反模式、Open Session In View模式、抓取策略、集合性能、Hibernate运行原理、开发的最佳实践

深入浅出学Spring Web MVC视频教程
系统、完整的学习Spring Web MVC开发的知识。包括：Spring Web MVC入门；理解DispatcherServlet；注解式控制器开发详解；数据类型转换；数据格式化；数据验证； 拦截器；对Ajax的支持；文件上传下载；表单标签等内容；最后以一个综合的CRUD带翻页的应用示例来综合所学的知识

浏览(54371)|评论(70)   交流分类：Java|笔记分类: Hadoop实战-初……
评论(70)
70楼 xiaowaxw  2017-08-29 引用

学习中
69楼 wwqz123  2017-03-19 引用

学习中
68楼 shenjb  2017-03-19 引用

挺好
67楼 hukunfeiguochao  2016-08-19 引用

东西,先全部下载下来再说!老师们辛苦啦!

66楼 1519623220  2016-08-19 引用

学习中 
65楼 刷儿  2016-08-19 引用

学习学习
64楼 我是一只小小小小田  2015-11-22 引用

学习中。。。课程不错
63楼 想你已成习惯  2015-09-15 引用
东西,先全部下载下来再说!老师们辛苦啦!
62楼 kelen121  2015-09-04 引用

不错
61楼 lijuanjuan  2015-08-27 引用

xuexi
60楼 雨后心晴  2015-07-03 引用

学习学习，谢谢楼主
59楼 lianghaoguan  2015-06-24 引用

学习
58楼 wind  2015-04-11 引用

学习中。。。课程不错
57楼 swhscmyns  2015-03-16 引用

感谢分享
56楼 神之心  2014-11-07 引用

非常感谢分享，刚开始接触，希望有所帮助！
55楼 Albert  2014-07-22 引用

相当不错，就是有点简单！！！
54楼 归去来辞  2014-06-09 引用

12322
53楼 qazwer1314123  2014-05-22 引用

学习中
52楼 rguon8866  2014-03-12 引用

谢谢分享..不错  必须看.
请登录后评论 登录

关于我们 | 联系我们 | 用户协议 | 私塾在线服务协议 | 版权声明 | 隐私保护

版权所有 Copyright(C)2009-2012 私塾在线学习网