收藏私塾在线
 

欢迎您来到私塾在线网!   

请登录! 

免费注册 

首页 > Java  > 云计算  > 云计算综合实战项目视频教程(更新版)

云计算综合实战项目视频教程(更新版) 

顾客评分:
人气:33974   讲师: Alex   
课次:46次   课时:25小时46分钟

原价:2384.00学币 普通会员价:1192.00学币

您是(【普通】会员,再优惠0.00学币)
您享有的最终折上折价格:
1192.00学币

会员级别优惠列表:『点击了解会员等级的好处
普通会员: 1192.00学币
VIP1会员: 1132.00学币
VIP2会员: 1072.00学币
VIP3会员: 1013.00学币
VIP4会员: 953.00学币
VIP5会员: 834.00学币

内容概述:通过一个真实完整的项目——某大型互联网企业用户上网行为日志分析系统,系统学习Hadoop、Hive,HBase、Zookeeper等云计算开发技术在真实商业系统中到底如何使用。具有极高的学习和参考价值。
         该系统是一个每天5亿条数据,上百个节点的实际商业项目,该系统将海量日志数据进行分布式存储,并通过分布式算法和网络爬虫技术形成标签化的用户模型,最终实现人与内容、人与行为、人与商品的智能配对。
技术要点:Hadoop、Hive、HBase、Zookeeper、爬虫技术等

 

 

云计算综合项目实战课程,重装上线!!!

 

完整工程源码,能真实运行,极具参考和学习价值 

 

关于更新版的特别声明

1:本版本为老师经过代码修正和调整后的版本,配套的源代码为能最终运行的版本,请已经购买过该课程的朋友,联系客服,获取最新的工程代码。

2:老师在最后补录了如何运行这个工程的视频课程,在最后的第35节和36节课,完整演示了如何运行这个云计算综合项目。对于已经购买过该课程的朋友,这两部分补充视频,已经自动添加到你们的课程列表里面了,请查看。

3:由于老师在上一个版本的基础上,调整了少量代码和修正了部分的bug,因此新的工程源代码和原视频里面讲述的代码并不完全一致,但是主要的逻辑和思路都是一样的,这点请大家在学习的时候稍做注意。

4:另外,对于每一个部分,老师调整了哪些代码,老师已经分模块做了调整代码的说明视频,在课程的最后第37节到46节,可以对照着学习。

 

    本课程由Alex老师为你精心准备,本课程是在调研多家开发企业广泛使用的技术的基础上,结合Alex老师多年的工作经验,综合设计完善而成。
    本课程在兼顾知识体系完善的前提下,把实际开发中应用最多、最深、最实用的技术抽取出来,结合Alex老师独特的教学理念和思维训练,精心编排,以期让学员能以最短的时间、花最少的精力去真正掌握Hadoop项目。
    在本课程中,你将会看到和学到很多Alex老师独特的东西,对知识深入的、一针见血的剖析,绝对会让你受益匪浅。

 

源自真实完整的项目
  本课程源自 每天5亿条数据,上百个节点集群的实际商业项目
 
云计算开发技术综合实战应用 
  学习Hadoop,Hive,HBase、Zookeeper等技术在真实商业系统中到底如何使用  

特别说明:关于老师在前面技术提到Oozie,但后面没有使用的说明 
  原本在课程规划的时候,是准备把Oozie加入进来的,可是随着课程录制的进度,课程内容本身越来越多,也越来越复杂,再加上Oozie本身也是一个很复杂的技术,要是加入进来的话,会导致整个项目的时间急剧拉长,因此决定这个项目课程中不加入Oozie,在后面,会单独安排Oozie的技术课程,然后有新的项目去使用Oozie,特此说明。

 
整体课程概览
1.项目背景与环境搭建
  项目背景与环境搭建
  项目模块和运行流程概览
2.系统监控模块
  系统监控1部分
  系统监控2部分-硬盘内存CPU监控实现
  系统监控3部分-MonitorServer实现
3.查询执行模块
  查询执行模块1部分-需求分析模型基础接口类建立
  查询执行模块2部分-QueryAPI and TaskAPI
  查询执行模块3部分-QueryServer的实现
4.系统初始化模块
  系统初始化一部分-需求分析连接池HiveTemlate建立
  系统初始化二部分--Hive表HBase表的初始化
5.数据导入导出模块
  数据导入与清洗1部分
  数据导入与清洗2部分
6.关键词处理模块
  关键词管理第一部分前期简单需求庖丁应用实例API的增删改查
  关键词管理第2部分关键词导入CSVDICXfile
  关键词管理第三部分关键词导出结束
7.系统API模块
  api第一部分需求前期设计加用户上网流量统计实现
  api第二部分流量BYIP用户区域统计热门URL用户包导出
8.分类关键词管理模块
  url分类关键词管理模块
9.爬虫模块
  爬虫一部分URLUtils及HttpImpl实现
  爬虫第二部分-Wget及Crawler实现
10.用户画像模块
  用户画像一部分每日画像实现
  用户画像-周期画像程序说明基础类建立
  用户画像-周期画像Mapper实现
  用户画像-周期画像Reducer实现
  用户画像-周期画像Reducer,Job ,Combiner实现
  用户画像Hive实现-基础类建立,UserProdfileDaoImpl
  用户画像-Hive实现UDAFActiveDegree函数
  用户画像Hive实现ActiveHourSegment
  用户画像Hive实现Categorycount函数 ActiveAvergAg及所有剩余函数
  用户画像Hive实现FigureOutUserProfile
  用户画像Hive实现UserProfile API及结束
11.CMD与日志生成模块
  CMD与日志生成模块
12。作业加载处理模块
  JobLanCher实现-日志作业处理模块
13。项目总结
  项目总结

正在加载,请稍候