收藏私塾在线
 

欢迎您来到私塾在线网!   

请登录! 

免费注册 


hadoop的笔记
状态: 离线
人气:3641236
访问用户量:3104
笔记经验:
总积分:1409
级别:普通会员
搜索本笔记
ta的交流分类
ta的交流主题贴(131)
ta的所有交流贴(138)
ta的全部笔记
全部笔记(249)
未分类笔记(0)
hadoop(109)
luoli的Hado……(19)
精通hadoop(10)
Hadoop原理与代……(6)
HBase(15)
深入浅出学Hive(11)
Hadoop实战-中……(11)
Hadoop实战-初……(8)
hadoop & h……(9)
Hive(18)
zookeeper(8)
Hadoop Str……(14)
云计算综合实战项目(11)
存档
2013-04(11)
2012-10(11)
2012-09(10)
2012-08(191)
2012-07(26)

2013-04-26 15:05:06
系统初始化模块——某大型互联网企业用户上网行为日志分析系统——云计算项目实战
浏览(4559)|评论(0)   交流分类:Java|笔记分类: 云计算综合实战项目

配套视频课程:http://sishuok.com/product/681

配套PPT下载:http://sishuok.com/forum/posts/list/6765.html

 

 

功能需求

对系统表进行初始化的工作包括 Hive HBase
日志表-log(Hive)

字段名

用户ID

昵称

 

访问URL

 

访问开始时间

访问结束时间

IP地址

流量

字段类型

String

 

String

 

String

 

String

 

String

 

String

 

bigint

 

用户上网区域分布及变化-user_online_info_area(Hive)

字段名

地区

用户数

 

日期

 

字段类型

String

 

bigint

 

String

 

 

 

用户上网流量统计-user_online_traffic(Hive)

字段名

用户ID

总流量

 

日期

 

字段类型

String

 

double

 

String

 

 

热门网站统计-hot_url (Hive)

字段名

url

pv

 

日期

 

字段类型

String

 

bigint

 

String

 

 

Query  HBase

rowkey:

task_id

C_FAMILY

data

 

任务task HBase

rowkey:

task_id

C_FAMILY

data

 

部分 代码实现

请参考视频和源代码

 

 

私塾在线原创独家云计算课程,转载请注明【http://sishuok.com/forum/blogPost/list/6770.html

浏览(4559)|评论(0)   交流分类:Java|笔记分类: 云计算综合实战项目

评论(0)
请登录后评论 登录

关于我们 | 联系我们 | 用户协议 | 私塾在线服务协议 | 版权声明 | 隐私保护

版权所有 Copyright(C)2009-2012 私塾在线学习网