简介:通过这部分的学习,可以对Java大数据有更深深一步的掌握,这些知识能够使您更加全面的掌握Java大数据,从而助您更快的拿到高薪。
  • 课程大纲
  • 课程介绍
  • 留言评论
  • 授课教师
101_离线计算系统_第1天(HADOOP快速入门)
01.自动化交互工具expect介绍立即观看
02.软件批量自动安装脚本开发-立即观看
03.软件自动安装脚本开发-立即观看
04.大数据概念介绍立即观看
05.大数据技术介绍立即观看
06.hdfs集群的安装立即观看
07.hdfs集群的自动化脚本启动立即观看
08.datanode启动失败的故障分析解决立即观看
09.hdfs最朴素的工作机制立即观看
10.开发一个自己的hdfs,步骤1开发立即观看
11.开发一个自己的hdfs,步骤2开发立即观看
12.开发一个自己的hdfs,步骤3开发立即观看
13.开发一个自己的hdfs,步骤4开发立即观看
14.hdfs文件存储机制的内部细节观察立即观看
15.hdfs的命令行客户端的常用操作命令立即观看
16.深入理解什么叫hdfs的客户端立即观看
202_离线计算系统_第2天(HDFS详解)
01.hdfs动态扩容的方法立即观看
02.hdfs的几个重要配置属性详解立即观看
03.创建客户端对象立即观看
04.下载文件到本地立即观看
05.文件夹创建立即观看
06.文件夹删除\改名立即观看
07.查询文件夹下的子节点信息立即观看
08.查询文件夹下的子节点信息2立即观看
09.使用hdfs的输入流来读取一个文件中指定范围的数据立即观看
10.使用hdfs的输出流来写数据到hdfs文件中立即观看
11.hfds客户端实例对象创建的源码走读立即观看
12.hdfs写数据流程原理解析立即观看
13.hdfs读数据流程原理解析立即观看
14.namenode工作机制-立即观看
15.自动采集文件到hdfs的脚本开发思路分析立即观看
16.自动采集文件到hdfs的脚本代码开发及测试立即观看
17.hadoop中的RPC框架立即观看
303_离线计算系统_第3天(MAPREDUCE详解
01.mapreduce分布式运算框架的原型解析立即观看
02.mapreduce程序运行的环境准备-yarn集群配置和启动立即观看
03.第一个mapreduce程序-用户pv数统计-mapper和reducer开发立即观看
04.第一个mapreduce程序-job提交客户端模板代码立即观看
05.第一个mapreduce程序总结立即观看
06.第2个mapreduce程序-wordcount的需求立即观看
07.第2个mapreduce程序-wordcount的开发-reducetask的实例数机制立即观看
08.第3个mapreduce程序-流量求和统计需求立即观看
09.第3个mapreduce程序-代码实现-立即观看
10.第3个mapreduce程序-知识点-hadoop序列化接口实现立即观看
11.第4个mapreduce程序-自定义分区规则的机制立即观看
12.第4个mapreduce程序-代码实现及测试立即观看
13.第5个mapreduce程序-创建索引-步骤1实现立即观看
14.第5个mapreduce程序-创建索引-步骤2实现立即观看
404_离线计算系统_第3天(MAPREDUCE加强 一)
01.mr程序运行大体流程回顾立即观看
02.mr程序运行在本地还是运行在yarn集群上的核心机制立即观看
03.mr程序工作机制详情解析之-maptask阶段立即观看
04.mr程序工作机制详情解析之-reducetask阶段立即观看
05.topn算法应用案例-mr程序debug方法立即观看
06.共同好友数据分析mr程序实现立即观看
07.yarn的工作机制及mapreduce程序在yarn上运行的过程立即观看
08.mr程序运行过程的观察立即观看
09.mr通用算法join的实现方式1立即观看
505_离线计算系统_第3天(MAPREDUCE加强 二)
01.map端join算法的实现机制----hadoop缓存文件分发工具cacheFile立即观看
02.高效topn实现算法的思路分析立即观看
03.高效topn算法的代码实现立即观看
04.自定义outputformat案例实现1立即观看
05.自定义outputformat案例实现步骤2立即观看
06.输出不同类别数据到不同路径的另一种实现工具--MultipleOutputs的使用立即观看
07.MR立即观看
08.mr相关资源参数---及--从eclipse中直接运行客户端提交job到yarn集群运行立即观看
09.HDFS的HA机制解析立即观看
10.hadoop的高可用集群搭建完全实践立即观看
6hive常用运算和函数
01.topn算法的两种实现方式---一个步骤实现----两个步骤实现立即观看
02.HIVE立即观看
03.HIVE和通常的数据库软件的区别----只适合做数据仓库用立即观看
04.hive的初体验立即观看
05.hive的元数据仓库指定为mysql立即观看
06.hive命令脚本批量执行立即观看
07.内部表和外部表的区别和意义立即观看
08.分区表partition用法及意义立即观看
09.数据导入导出立即观看
10.文件存储格式立即观看
11.新增-删除分区--向分区中导入数据立即观看
12.修改表名--列定义立即观看
13.显示命令立即观看
14.加载数据入立即观看
15.left semi join立即观看
16.不等值join的语法立即观看
17.复杂数据解析立即观看
7HBASE基础
01.hive的一个复杂sql案例----级联求和---补充数仓的概念立即观看
02.zookeeper简介----及zk集群安装--自动启动脚本开发立即观看
03.zookeeper的集群结构和leader选举机制立即观看
04.zookeeper的命令行客户端使用及zk的数据节点组织形式及类别立即观看
05.zookeeper的事件监听功能演示立即观看
06.zookeeper的客户端api基本使用---连接创建立即观看
07.zookeeper的客户端api数据增删改查操作立即观看
08.zookeeper的监听器api使用示例立即观看
09.zookeeper的应用案例----开发一个动态感知上下线的分布式系统立即观看
10.hbase结构原理快速理解立即观看
11.hbase集群的安装部署和启动立即观看
12.hbase的表结构--及命令行客户端的基本使用立即观看
8辅助工具 flume、sqoop、azkaban的使用
01.hbase的客户端api-DDL操作立即观看
02.hbase的客户端api--DML操作--插入数据立即观看
03.hbase的客户端api--DML操作--数据查询立即观看
04.hbase的客户端api---scan扫描的过滤器---通用过滤器立即观看
05.hbase的存储原理---region-列族--store-wals-split--merge-hfile立即观看
06.hbase的寻址机制原理解析----zookeeper记录root---root记录meta--meta记录用户表的region位置立即观看
07.hbase的批量数据导入工具api---bulkload立即观看
08.flume快速理解立即观看
09.flume使用示例---采文件夹中的新文件到HDFS立即观看
10.flume使用示例---利用tail-F来实时采集最新数据到HDFS立即观看
11.flume使用示例---两级串联--第一级:tail-avro--第二级:avro-hdfs立即观看
12.sqoop安装--及从mysql导入数据到hdfs命令示例立即观看
13.sqoop使用命令案例----从mysql导入数据到hive中立即观看
14.离线批量大数据处理系统通用架构解析立即观看

本章内容概述

  • 涛哥金牌讲师国内第一批大数据讲师

    毕业于南京邮电大学,JAVA企业级应用专家、大数据处理技术领域专家,大数据全栈工程师,曾任亚信BI大数据事业部技术经理。

    成功案例:中国移动流量运营系统中国银行易商互联网金融系统

  • 星哥金牌讲师国内第一批大数据从业者

    大数据全栈工程师,精通Hadoop、Hive、Hbase、SparkElasticSearch等技术。

    成功案例:搜狗《大数据精准营销平台》新浪《微博用户画像》

  • 杨老师金牌讲师7年的系统开发实战经验

    精通JAVA、Hadoop、Spark等大数据生态圈核心技术框架。

    成功案例:国家电网统一漏洞补丁管理系统国家核安全局官网

  • 张老师金牌讲师电商行业拥有长达6年的系统开发实战经验

    毕业于哈尔滨工业大学,先后就职于北大方正、IBM、亚信中国、联想等公司。

    成功案例:联想电商平台智能推荐系统中国教育电视台果实网

  • 许老师金牌讲师任教期间获得大量好评

    精通JavaSE、Javascript、Ajax、JQuery、DWR、JSP、Servlet、JDBCStruts1/2、Spring、Hibernate、PHP、C、C#等开发技术。

    成功案例:游心旅游网手机圈子

  • 赵老师金牌讲师小牛学堂首席技术布道师

    两家上市IT公司担任技术总监和项目经理,在移动互联网开发有很深的造诣,在大数据领域也有非常丰富的经验。

    成功案例:IVR业务支撑平台企业通信软件