101_离线计算系统_第1天（HADOOP快速入门）

01.自动化交互工具expect介绍立即观看

02.软件批量自动安装脚本开发-立即观看

03.软件自动安装脚本开发-立即观看

04.大数据概念介绍立即观看

05.大数据技术介绍立即观看

06.hdfs集群的安装立即观看

07.hdfs集群的自动化脚本启动立即观看

08.datanode启动失败的故障分析解决立即观看

09.hdfs最朴素的工作机制立即观看

10.开发一个自己的hdfs，步骤1开发立即观看

11.开发一个自己的hdfs，步骤2开发立即观看

12.开发一个自己的hdfs，步骤3开发立即观看

13.开发一个自己的hdfs，步骤4开发立即观看

14.hdfs文件存储机制的内部细节观察立即观看

15.hdfs的命令行客户端的常用操作命令立即观看

16.深入理解什么叫hdfs的客户端立即观看

202_离线计算系统_第2天（HDFS详解）

01.hdfs动态扩容的方法立即观看

02.hdfs的几个重要配置属性详解立即观看

03.创建客户端对象立即观看

04.下载文件到本地立即观看

05.文件夹创建立即观看

06.文件夹删除\改名立即观看

07.查询文件夹下的子节点信息立即观看

08.查询文件夹下的子节点信息2立即观看

09.使用hdfs的输入流来读取一个文件中指定范围的数据立即观看

10.使用hdfs的输出流来写数据到hdfs文件中立即观看

11.hfds客户端实例对象创建的源码走读立即观看

12.hdfs写数据流程原理解析立即观看

13.hdfs读数据流程原理解析立即观看

14.namenode工作机制-立即观看

15.自动采集文件到hdfs的脚本开发思路分析立即观看

16.自动采集文件到hdfs的脚本代码开发及测试立即观看

17.hadoop中的RPC框架立即观看

303_离线计算系统_第3天（MAPREDUCE详解

01.mapreduce分布式运算框架的原型解析立即观看

02.mapreduce程序运行的环境准备-yarn集群配置和启动立即观看

03.第一个mapreduce程序-用户pv数统计-mapper和reducer开发立即观看

04.第一个mapreduce程序-job提交客户端模板代码立即观看

05.第一个mapreduce程序总结立即观看

06.第2个mapreduce程序-wordcount的需求立即观看

07.第2个mapreduce程序-wordcount的开发-reducetask的实例数机制立即观看

08.第3个mapreduce程序-流量求和统计需求立即观看

09.第3个mapreduce程序-代码实现-立即观看

10.第3个mapreduce程序-知识点-hadoop序列化接口实现立即观看

11.第4个mapreduce程序-自定义分区规则的机制立即观看

12.第4个mapreduce程序-代码实现及测试立即观看

13.第5个mapreduce程序-创建索引-步骤1实现立即观看

14.第5个mapreduce程序-创建索引-步骤2实现立即观看

404_离线计算系统_第3天（MAPREDUCE加强 一）

01.mr程序运行大体流程回顾立即观看

02.mr程序运行在本地还是运行在yarn集群上的核心机制立即观看

03.mr程序工作机制详情解析之-maptask阶段立即观看

04.mr程序工作机制详情解析之-reducetask阶段立即观看

05.topn算法应用案例-mr程序debug方法立即观看

06.共同好友数据分析mr程序实现立即观看

07.yarn的工作机制及mapreduce程序在yarn上运行的过程立即观看

08.mr程序运行过程的观察立即观看

09.mr通用算法join的实现方式1立即观看

505_离线计算系统_第3天（MAPREDUCE加强 二）

01.map端join算法的实现机制----hadoop缓存文件分发工具cacheFile立即观看

02.高效topn实现算法的思路分析立即观看

03.高效topn算法的代码实现立即观看

04.自定义outputformat案例实现1立即观看

05.自定义outputformat案例实现步骤2立即观看

06.输出不同类别数据到不同路径的另一种实现工具--MultipleOutputs的使用立即观看

07.MR立即观看

08.mr相关资源参数---及--从eclipse中直接运行客户端提交job到yarn集群运行立即观看

09.HDFS的HA机制解析立即观看

10.hadoop的高可用集群搭建完全实践立即观看

6hive常用运算和函数

01.topn算法的两种实现方式---一个步骤实现----两个步骤实现立即观看

02.HIVE立即观看

03.HIVE和通常的数据库软件的区别----只适合做数据仓库用立即观看

04.hive的初体验立即观看

05.hive的元数据仓库指定为mysql立即观看

06.hive命令脚本批量执行立即观看

07.内部表和外部表的区别和意义立即观看

08.分区表partition用法及意义立即观看

09.数据导入导出立即观看

10.文件存储格式立即观看

11.新增-删除分区--向分区中导入数据立即观看

12.修改表名--列定义立即观看

13.显示命令立即观看

14.加载数据入立即观看

15.left semi join立即观看

16.不等值join的语法立即观看

17.复杂数据解析立即观看

7HBASE基础

01.hive的一个复杂sql案例----级联求和---补充数仓的概念立即观看

02.zookeeper简介----及zk集群安装--自动启动脚本开发立即观看

03.zookeeper的集群结构和leader选举机制立即观看

04.zookeeper的命令行客户端使用及zk的数据节点组织形式及类别立即观看

05.zookeeper的事件监听功能演示立即观看

06.zookeeper的客户端api基本使用---连接创建立即观看

07.zookeeper的客户端api数据增删改查操作立即观看

08.zookeeper的监听器api使用示例立即观看

09.zookeeper的应用案例----开发一个动态感知上下线的分布式系统立即观看

10.hbase结构原理快速理解立即观看

11.hbase集群的安装部署和启动立即观看

12.hbase的表结构--及命令行客户端的基本使用立即观看

8辅助工具 flume、sqoop、azkaban的使用

01.hbase的客户端api-DDL操作立即观看

02.hbase的客户端api--DML操作--插入数据立即观看

03.hbase的客户端api--DML操作--数据查询立即观看

04.hbase的客户端api---scan扫描的过滤器---通用过滤器立即观看

05.hbase的存储原理---region-列族--store-wals-split--merge-hfile立即观看

06.hbase的寻址机制原理解析----zookeeper记录root---root记录meta--meta记录用户表的region位置立即观看

07.hbase的批量数据导入工具api---bulkload立即观看

08.flume快速理解立即观看

09.flume使用示例---采文件夹中的新文件到HDFS立即观看

10.flume使用示例---利用tail-F来实时采集最新数据到HDFS立即观看

11.flume使用示例---两级串联--第一级：tail-avro--第二级：avro-hdfs立即观看

12.sqoop安装--及从mysql导入数据到hdfs命令示例立即观看

13.sqoop使用命令案例----从mysql导入数据到hive中立即观看

14.离线批量大数据处理系统通用架构解析立即观看

本章内容概述

• 涛哥金牌讲师国内第一批大数据讲师

  毕业于南京邮电大学，JAVA企业级应用专家、大数据处理技术领域专家，大数据全栈工程师，曾任亚信BI大数据事业部技术经理。

  成功案例：中国移动流量运营系统中国银行易商互联网金融系统

• 星哥金牌讲师国内第一批大数据从业者

  大数据全栈工程师，精通Hadoop、Hive、Hbase、SparkElasticSearch等技术。

  成功案例：搜狗《大数据精准营销平台》新浪《微博用户画像》

• 杨老师金牌讲师7年的系统开发实战经验

  精通JAVA、Hadoop、Spark等大数据生态圈核心技术框架。

  成功案例：国家电网统一漏洞补丁管理系统国家核安全局官网

• 张老师金牌讲师电商行业拥有长达6年的系统开发实战经验

  毕业于哈尔滨工业大学，先后就职于北大方正、IBM、亚信中国、联想等公司。

  成功案例：联想电商平台智能推荐系统中国教育电视台果实网

• 许老师金牌讲师任教期间获得大量好评

  精通JavaSE、Javascript、Ajax、JQuery、DWR、JSP、Servlet、JDBCStruts1/2、Spring、Hibernate、PHP、C、C#等开发技术。

  成功案例：游心旅游网手机圈子

• 赵老师金牌讲师小牛学堂首席技术布道师

  两家上市IT公司担任技术总监和项目经理，在移动互联网开发有很深的造诣，在大数据领域也有非常丰富的经验。

  成功案例：IVR业务支撑平台企业通信软件