收藏私塾在线
 

欢迎您来到私塾在线网!   

请登录! 

免费注册 


hadoop的笔记
状态: 离线
人气:2866685
访问用户量:2996
笔记经验:
总积分:1409
级别:普通会员
搜索本笔记
ta的交流分类
ta的交流主题贴(131)
ta的所有交流贴(138)
ta的全部笔记
全部笔记(249)
未分类笔记(0)
hadoop(109)
luoli的Hado……(19)
精通hadoop(10)
Hadoop原理与代……(6)
HBase(15)
深入浅出学Hive(11)
Hadoop实战-中……(11)
Hadoop实战-初……(8)
hadoop & h……(9)
Hive(18)
zookeeper(8)
Hadoop Str……(14)
云计算综合实战项目(11)
存档
2013-04(11)
2012-10(11)
2012-09(10)
2012-08(191)
2012-07(26)

记笔记 » hadoop的笔记» Hive笔记
2012-08-23 15:15:07
(转)hive 查询显示列名 及 行转列显示
交流分类:Java

hive默认查询不会显示列名, 当一个表字段比较多的时候,往往看不出值与列之间的对应关系,对日常查错及定位问题带来不便,应同事要求,看了HIVE CLI源码,做了下些许调整, 加入列头打印及行转列显示功能 未开启行转列功能之前: hive> > > select * from example_tab……
浏览(4364)|评论 (0)|笔记分类 Hive

2012-08-23 15:14:33
hive随谈(hive操作create,alter等)
交流分类:Java

Hive 的官方文档中对查询语言有了很详细的描述,请参考:http://wiki.apache.org/hadoop/Hive/LanguageManual ,本文的内容大部分翻译自该页面,期间加入了一些在使用过程中需要注意到的事项。 Create Table CREATE [EXTERNAL] T……
浏览(2193)|评论 (0)|笔记分类 Hive

2012-08-23 15:14:01
hive 基本语法
交流分类:Java

本来想讲自己用到的写出来了,结果发现一个比较全面的文章已经介绍过了,那我就不在重新发明轮子了,我也跟着学习一下。  转自:http://jeffxie.blog.51cto.com/1365360/317524  DDL Operations  创建表  hive> CREATE TABLE pok……
浏览(27356)|评论 (0)|笔记分类 Hive

2012-08-23 15:13:39
hive数据导出
交流分类:Java

link:http://landyer.iteye.com/blog/1070546 很多时候,我们在hive中执行select语句,希望将最终的结果保存到本地文件或者保存到hdfs系统中或者保存到一个新的表中,hive提供了方便的关键词,来实现上面所述的功能。 1.将select的结果放到一个的的……
浏览(3688)|评论 (0)|笔记分类 Hive

2012-08-23 15:13:09
(转)hive mapjoin使用
交流分类:Java

link:http://blog.csdn.net/xqy1522/article/details/6699740 今天遇到一个hive的问题,如下hive sql:   select f.a,f.b from A t join B f  on ( f.a=t.a and f.ftime=20110……
浏览(5366)|评论 (0)|笔记分类 Hive

2012-08-23 15:12:46
hive 三种启动方式及用途,关注通过jdbc连接的启动
交流分类:Java

1, hive  命令行模式,直接输入/hive/bin/hive的执行程序,或者输入 hive –service cli        用于linux平台命令行查询,查询语句基本跟mysql查询语句类似  2, hive  web界面的启动方式,hive –service hwi         ……
浏览(34131)|评论 (0)|笔记分类 Hive

2012-08-23 15:12:23
(转)hive sql 学习笔记(1)
交流分类:Java

一、 创建表      在官方的wiki里,example是这样的: Sql代码 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name      [(col_name data_type [COMMENT col_comment], ...)]    ……
浏览(7945)|评论 (0)|笔记分类 Hive

2012-08-23 15:11:45
hive QL 插入语法
交流分类:Java

1.insert 语法格式为: 基本的插入语法: INSERT OVERWRITE TABLE tablename [PARTITON(partcol1=val1,partclo2=val2)]select_statement FROM from_statement insert overwrite……
浏览(21681)|评论 (0)|笔记分类 Hive

2012-08-23 15:11:26
hive+mysql安装
交流分类:Java

hive安装 刚刚安装好hadoop迫不及待要玩下hive,所以自己找了些资料,安装了下hive,这里记录详细的安装过程和碰到的问题: 1.在安装hadoop之前首先确定hadoop已经安装成功,具体安装方法请参考hadoop安装。 2.下载hive版本 我下载的是   下载地址为http://hi……
浏览(11646)|评论 (0)|笔记分类 Hive

2012-08-08 16:54:42
Hive使用一段时间后Hadoop集群占用空间暴增的原因
交流分类:Java

我使用的是hive。 所有的数据也是在hive中 load data inpath 导入的 导入的数据时保存到虚拟路径 hdfs:////user/hive/warehouse 以一个表一个文件夹的形式 两天来一直面对着一个困惑 从hive中load进去的数据只有600G但是页面显示的DFS Use……
浏览(6603)|评论 (0)|笔记分类 Hive

2012-08-08 16:54:27
Hive HBase整合使用
交流分类:Java

Hive HBase整合使用 将Hive中的数据导入到HBase中 wiki上的介绍链接如下: http://wiki.apache.org/hadoop/Hive/HBaseIntegration   各版本要求: hadoop-0.20.2 hbase-0.20.3 hive-0.6.0(之前的……
浏览(11631)|评论 (0)|笔记分类 Hive

2012-08-08 16:53:59
[7] 编写Python脚本将Hive的运算结果保存到MySQL数据库中(1)
交流分类:Java

编写Python脚本将Hive的运算结果保存到MySQL数据库中(1) 很多情况下,需要将Hive中的运算结果保存到MySQL数据库中,可以通过简单的Python脚本来实现。 例子1:如果获取Hive查询语句的返回值 #encoding=utf-8 from hive_service import ……
浏览(5385)|评论 (0)|笔记分类 Hive

2012-08-08 16:53:35
【6】hive报Could not load shims in class null错误的原因
交流分类:Java

  mongodb@krusiting-laptop:~/hive-0.6.0$ bin/hive Exception in thread "main" java.lang.RuntimeException: Could not load shims in class null at org.apa……
浏览(6645)|评论 (0)|笔记分类 Hive

2012-08-08 16:52:42
【5】hive报Invalid maximum heap size: -Xmx4096m错误解决方法
交流分类:Java

mongodb@krusiting-laptop:~/hive-0.6.0$ bin/hive Invalid maximum heap size: -Xmx4096m The specified size exceeds the maximum representable size. Could ……
浏览(7335)|评论 (0)|笔记分类 Hive

2012-08-08 16:52:15
【4】HIVE中map,array和structs使用
交流分类:Java

1:怎样导入文本文件(格式是怎样的?),2:怎样查询数据,已经能否在join中使用?在子查询中使用?等等 知道怎么在hive中导入数组不? 例如:我想把 数组[1,2,3] 和 数组 ["a","b","c"] 导入到table1中 create table table2 ( a array , b……
浏览(2595)|评论 (0)|笔记分类 Hive

2012-08-08 16:50:24
【3】hive中关于partition的操作
交流分类:Java

hive> create table mp (a string) partitioned by (b string, c string); OK Time taken: 0.044 seconds hive> alter table mp add partition (b='1', c='1'); ……
浏览(14573)|评论 (0)|笔记分类 Hive

2012-08-08 16:49:02
【2】How to load data into Hive
交流分类:Java

How to load data into Hive ------------------------ In order to load data into Hive, we need to tell Hive the format of the data through "CREATE TABLE……
浏览(4806)|评论 (0)|笔记分类 Hive

2012-08-08 16:47:53
【1】HIve升级到新版本过程
交流分类:Java

1: 将原有的hive改名为hive_backup 2: 将原有hive中的conf文件夹全部复制到新版本hive中 3: 修改hive-conf.sh 文件 添加HADOOP_HOME  4: 相关第三方的包要转移到新的hive版本lib目录下 5: 首先要把之前的10000端口对应的线程kill……
浏览(2317)|评论 (0)|笔记分类 Hive

关于我们 | 联系我们 | 用户协议 | 私塾在线服务协议 | 版权声明 | 隐私保护

版权所有 Copyright(C)2009-2012 私塾在线学习网