简介:通过这部分的学习,可以对Java大数据有更深深一步的掌握,这些知识能够使您更加全面的掌握Java大数据,从而助您更快的拿到高薪。
  • 课程大纲
  • 课程介绍
  • 留言评论
  • 授课教师
101 Spark入门
01spark简介-1立即观看
02spark简介-2立即观看
03Spark环境搭建立即观看
04Spark高可用集群搭建立即观看
05SparkShell的使用立即观看
06Spark各个进程的作用简介与YARN的对比立即观看
07Scala语言编写Spark的WordCount程序立即观看
08Java语言编写Spark的WordCount程序立即观看
09用JavaLambda编写Spark的WordCount程序立即观看
10Spark任务打包和提交立即观看
202 弹性分布式数据集RDD(一)
01复习立即观看
02RDD简介立即观看
03RDD的Transformation和action立即观看
04RDD的常用transfermation立即观看
05RDD的分区数量立即观看
06RDD的常用transfermation-2立即观看
06RDD的常用transfermation-3立即观看
07RDD的常用transfermation-4立即观看
08RDD的常用Action立即观看
09题目/求每个学科最受欢迎的老师立即观看
10每个学科最受欢迎的老师代码实现立即观看
11mapPartitionsWithIndex的使用立即观看
12aggregate的使用立即观看
303 弹性分布式数据集RDD(二)
01复习立即观看
02RDD的算子使用-1立即观看
03RDD的算子使用-2立即观看
04RDD的算子使用-3立即观看
05RDD的算子使用-4立即观看
06RDD的算子使用-5立即观看
07combineByKey的使用立即观看
08combineByKey的使用2立即观看
09RDD详细说明立即观看
10WordCount执行过程立即观看
404 弹性分布式数据集RDD(三)
01自定义分区器计算最受欢迎的老师立即观看
02RDD的cache简介立即观看
03自定义分区器避免多少shuffle立即观看
04自定义分区器避免多次shuffle立即观看
05RDD的cache立即观看
06RDD的checkpoint立即观看
07RDD的存储级别立即观看
08CheckPoint的使用技巧立即观看
09RDD的宽依赖和窄依赖立即观看
10stage中Task数量立即观看
505 弹性分布式数据集RDD(四)
01复习和Stage划分实验立即观看
02spark认为执行流程立即观看
03广播变量立即观看
04根据IP计算归属地-1立即观看
05根据IP计算归属地-2立即观看
06利用foreachPartition将数据写入到数据库立即观看
07JdbcRDD的使用立即观看
08作业立即观看
606 SparkSQL (一)
02Spark SQL简介.mov 02spark-sql简介立即观看
03SparkSQL基本使用立即观看
04spark基本使用2立即观看
05Spark老的DataFrame API-1立即观看
06Spark2.0DataFrame立即观看
07spark2.0DataSet和DataFrame简介立即观看
08使用DataSet编写spark程序立即观看
09spark2.0新特性立即观看
01复习立即观看
707 SparkSQL(二)
01复习立即观看
02SparkSQL的数据源立即观看
03SparkSQL将数据写入到MySQL中立即观看
04自定义函数计算IP归属地-1立即观看
05自定义函数计算IP归属地-2立即观看
06自定义聚合函数UDAF立即观看
07spark-sql整合hive-1立即观看
08spark-sql整合hive-2立即观看
09spark-sql整合hive的自定义函数立即观看
808 Kafka (一)
01复习立即观看
02实时计算简介立即观看
03kafka简介立即观看
04kafka集群安装立即观看
05kafka集群安装立即观看
06Kafka一下重要知识点立即观看
07SparkStreaming简介立即观看
08SparkStreamingWordCount立即观看
09可以更新状态的StreamingWordCount立即观看
10sparkStream整合kafka立即观看
909 Kafka(二)
01复习立即观看
02kafka直连方式立即观看
03kafka直连方式记录偏移量立即观看
04Kafka的receiver和直连方式的区别立即观看
05窗口函数立即观看
06SparkStreaming创建连接池立即观看
07统计在线玩家数量和区域分布立即观看
08实现在线玩家统计立即观看
1010 Spark-on-YARN
01Yarn知识回顾立即观看
02SparkOnYarn过程演示立即观看
03SparkOnYarn的Cluster模式和Client模式立即观看
04AkkaRPC案例回顾立即观看
05Spark代码编译过程立即观看
06Master和Worker启动过程立即观看
07创建SparkContext过程立即观看
08创建DriverActor和ClientActor过程立即观看
09提交任务和资源调度立即观看
10启动Executor过程立即观看

本章内容概述

  • 涛哥金牌讲师国内第一批大数据讲师

    毕业于南京邮电大学,JAVA企业级应用专家、大数据处理技术领域专家,大数据全栈工程师,曾任亚信BI大数据事业部技术经理。

    成功案例:中国移动流量运营系统中国银行易商互联网金融系统

  • 星哥金牌讲师国内第一批大数据从业者

    大数据全栈工程师,精通Hadoop、Hive、Hbase、SparkElasticSearch等技术。

    成功案例:搜狗《大数据精准营销平台》新浪《微博用户画像》

  • 杨老师金牌讲师7年的系统开发实战经验

    精通JAVA、Hadoop、Spark等大数据生态圈核心技术框架。

    成功案例:国家电网统一漏洞补丁管理系统国家核安全局官网

  • 张老师金牌讲师电商行业拥有长达6年的系统开发实战经验

    毕业于哈尔滨工业大学,先后就职于北大方正、IBM、亚信中国、联想等公司。

    成功案例:联想电商平台智能推荐系统中国教育电视台果实网

  • 许老师金牌讲师任教期间获得大量好评

    精通JavaSE、Javascript、Ajax、JQuery、DWR、JSP、Servlet、JDBCStruts1/2、Spring、Hibernate、PHP、C、C#等开发技术。

    成功案例:游心旅游网手机圈子

  • 赵老师金牌讲师小牛学堂首席技术布道师

    两家上市IT公司担任技术总监和项目经理,在移动互联网开发有很深的造诣,在大数据领域也有非常丰富的经验。

    成功案例:IVR业务支撑平台企业通信软件