HBase笔记 - hadoop的笔记 - 记笔记 - 私塾在线

Hbase有两种压缩策略：minor和major。Minor compactions通常选择几个临近的小的storefiles把他们重写成一个。Minors 不会丢掉已删除或者过期的cells，只有major compactions才会做这些。有时一次Minor compactions将会选择一个s……

浏览(7893)|评论 (0)|笔记分类 HBase

2013-12-29 10:08:02
hbase code
交流分类：Java

package com.run.hbase.dataImport; import java.io.BufferedReader; import java.io.BufferedWriter; import java.io.File; import java.io.FileReader; im……

浏览(11677)|评论 (9)|笔记分类 HBase

2012-08-08 16:57:05
hbase 结点之间时间不一致造成regionserver启动失败
交流分类：Java

Caused by: org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server s3,60020,1304927875246 has been rejected; Re……

浏览(8650)|评论 (0)|笔记分类 HBase

2012-08-08 15:49:41
HBase的数据模型
交流分类：Java

Hbase的数据模型 row 行 column 列 row keys 行键 column keys 列键 column families 列族 Hbase的数据模型和Bigtable的数据模型是一致的,非常适用于数据密集型的系统. 简单的说,Hbase可以简化描述为一个Map>>>. 一个M……

浏览(8489)|评论 (0)|笔记分类 HBase

2012-08-08 15:49:12
[2] HBase表的基本操作
交流分类：Java

[hadoopuser@master hbase-0.20.3]$ bin/hbase shell HBase Shell; enter 'help' for list of supported commands. Version: 0.20.3, rUnknown, Fri Apr 9 1……

浏览(2966)|评论 (0)|笔记分类 HBase

2012-08-08 15:48:54
[1] HBase集群配置安装
交流分类：Java

HBase集群配置安装 hadoop-0.20.2 hbase-0.20.3 zookeeper-3.3.0 1: tar zxvf hbase-0.20.3.tar.gz 2: 修改 ./hbase-0.20.3/conf/hbase-env.sh export JAVA_HOME=/us……

浏览(6518)|评论 (0)|笔记分类 HBase

2012-08-02 13:44:23
HBase性能调优
交流分类：Java

因官方Book Performance Tuning部分章节没有按配置项进行索引，不能达到快速查阅的效果。所以我以配置项驱动，重新整理了原文，并补充一些自己的理解，如有错误，欢迎指正。配置优化 zookeeper.session.timeout 默认值：3分钟（180000ms）说明：Regio……

浏览(6173)|评论 (0)|笔记分类 HBase

2012-08-02 13:24:52
HBase异常：hbase-default.xml file seems to be for and old version of HBase的解决方法
交流分类：Java

近期在使用HBase Java Client连接HBase服务端创建Configuration对象时，遇到了hbase-default.xml file seems to be for and old version of HBase的异常，经过查找资料及阅读HBase相关源码，对这类异常的解决方法……

浏览(4921)|评论 (0)|笔记分类 HBase

2012-08-02 13:01:03
HTable和HTablePool使用注意事项
交流分类：Java

HTable和HTablePool都是HBase客户端API的一部分，可以使用它们对HBase表进行CRUD操作。下面结合在项目中的应用情况，对二者使用过程中的注意事项做一下概括总结。 HTable HTable是HBase客户端与HBase服务端通讯的Java API对象，客户端可以通过HTabl……

浏览(5371)|评论 (0)|笔记分类 HBase

2012-08-02 13:00:41
HBase性能优化方法总结（四）：数据计算
交流分类：Java

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第四部分内容：数据计算相关的优化方法。 4. 数据计算 4.1 服务端计算 Coprocessor运行于HBase RegionServ……

浏览(3356)|评论 (0)|笔记分类 HBase

2012-08-02 12:59:44
HBase性能优化方法总结（三）：读表操作
交流分类：Java

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第三部分内容：读表操作相关的优化方法。 3. 读表操作 3.1 多HTable并发读创建多个HTable客户端用于读操作，提高读数据的……

浏览(8339)|评论 (0)|笔记分类 HBase

2012-08-02 12:59:06
HBase性能优化方法总结（二）：写表操作
交流分类：Java

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第二部分内容：写表操作相关的优化方法。 2. 写表操作 2.1 多HTable并发写创建多个HTable客户端用于写操作，提高写数据的……

浏览(4980)|评论 (0)|笔记分类 HBase

2012-08-02 12:58:29
HBase性能优化方法总结（一）：表的设计
交流分类：Java

本文主要是从HBase应用程序设计与开发的角度，总结几种常用的性能优化方法。有关HBase系统配置级别的优化，可参考：淘宝Ken Wu同学的博客。下面是本文总结的第一部分内容：表的设计相关的优化方法。 1. 表的设计 1.1 Pre-Creating Regions 默认情况下，在创建HBase表……

浏览(4580)|评论 (0)|笔记分类 HBase

2012-08-01 14:22:02
HBase在数据统计应用中的使用心得
交流分类：Java

1. 数据统计的需求互联网上对于数据的统计，一个重要的应用就是对网站站点数据的统计，例如CNZZ站长统计、百度统计、Google Analytics、量子恒道统计等等。网站站点统计工具无外乎有以下一些功能： 1）网站流量统计：包括PV、UV、IP等指标，这些统计指标可以以趋势图的形式展示出来，如……

浏览(5484)|评论 (0)|笔记分类 HBase

2012-08-01 14:21:04
HBase Java客户端编程
交流分类：Java

本文以HBase 0.90.2为例，介绍如何在Windows系统，Eclipse IDE集成环境下，使用Java语言，进行HBase客户端编程，包含建立表、删除表、插入记录、删除记录、各种方式下的查询操作等。 1. 准备工作 1、下载后安装jdk包（这里使用的是jdk-6u10-rc2-bin-b3……

浏览(7847)|评论 (0)|笔记分类 HBase