构建未来-极客学习平台-专业的IT职业在线教育平台

Spark基础到进阶

1，有JAVA基础的开发人员 2，有数据库基础的开发人员 3，想从事大数据研发或提升的开人员

Spark基础到进阶

16.2小时 … 91课时 … 761人已学

￥199.00 ￥299.00

开始学习

开通VIP视频课程免费学

第1章

第2章

第3章

第4章

第5章

第6章

第7章

第8章

第9章

第10章

第11章

第12章

第13章

第14章

第15章

第16章

第1章 Spark入门

1 课程概要 1.4分钟登录

2 Spark产生背景 5.2分钟登录

3 Spark是什么及特点 13.7分钟登录

4 Spark发展历史 3.7分钟登录

5 Spark对比Hadoop 17.4分钟登录

6 Spark开发语言及运行模式 2.8分钟登录

7 Spark和Hadoop的协作性 4.2分钟登录

8 Spark源码编译 19.9分钟登录

9 Spark Local模式环境搭建及简单使用 17.2分钟登录

10 Spark Standalone模式环境搭建及简单使用 13.8分钟登录

第2章 Spark Core基础

1 课程概要 0.7分钟登录

2 RDD 20.2分钟登录

3 RDD Operation 23.4分钟登录

4 RDD Operation案例 22.5分钟登录

5 wordcount案例 16.1分钟登录

第3章 Spark Core进阶

1 课程概要 0.7分钟登录

2 RDD Cache 26.7分钟登录

3 Lineage & Dependence 14.9分钟登录

4 Spark核心概念 12.7分钟登录

5 Spark运行架构 7.7分钟登录

第4章 Spark Core编程 & 调优

1 课程概要 0.7分钟登录

2 流量统计日志案例(hive和spark-shell)实现 15.9分钟登录

3 流量统计日志案例IDEA开发并使用spark-submit命令提交到集群运行 17.1分钟登录

4 groupByKey & reduceByKey 13.8分钟登录

5 慎用collect 4.4分钟登录

6 cache和persist的区别 3.3分钟登录

7 partition数量的设置 26.2分钟登录

第5章 Spark SQL基础

1 课程概要 1分钟登录

2 Spark SQL前世今生 6.9分钟登录

3 Spark SQL入门 16.2分钟登录

4 SQLContext & HiveContext 6.1分钟登录

5 Spark SQL使用 17.3分钟登录

6 DataFrame 8.8分钟登录

7 External Data Source API 9.2分钟登录

第6章 Spark SQL高级应用

1 课程概要 0.9分钟登录

2 Spark SQL处理json格式文件 13.5分钟登录

3 Spark SQL处理Parquet格式文件 5.2分钟登录

4 Spark SQL访问Hive表数据 6.3分钟登录

5 Spark SQL函数使用 7分钟登录

6 Spark SQL常用优化策略 16.9分钟登录

7 Spark SQL编程 17.3分钟登录

第7章 Spark Streaming入门

1 课程概要 1分钟登录

2 大数据实时处理概述 4.7分钟登录

3 Spark Streaming概述 6.8分钟登录

4 Spark Streaming工作原理 7.6分钟登录

5 Spark Streaming核心概念 18.7分钟登录

6 WordCount案例 9.4分钟登录

第8章 Spark Streaming操作多种不同数据源案例

1 课程概要 0.8分钟登录

2 Spark Streaming处理socket数据案例 13.9分钟登录

3 Spark Streaming结合Spark SQL处理HDFS数据案例 14.3分钟登录

4 Kafka 21.9分钟登录

第9章 Spark Streaming进阶

1 课程概要 0.7分钟登录

2 Spark Streaming处理Kafka数据模式一 13.6分钟登录

3 updateByKey操作 9.4分钟登录

4 Spark Streaming处理Kafka数据模式二 12.7分钟登录

5 对接kafka两种模式的对比 5.3分钟登录

6 常用优化策略 7.2分钟登录

第10章 Spark on YARN

1 课程概要 0.8分钟登录

2 YARN产生背景 5.3分钟登录

3 YARN架构及工作原理 7.1分钟登录

4 Spark on YARN原理 14.8分钟登录

5 Spark on YARN(yarn-client)案例 13.3分钟登录

6 Spark on YARN(yarn-cluster)案例 6.1分钟登录

第11章 HistoryServer

第12章 Hive on Spark

5 SQL on Hadoop常用框架性能对比 9.7分钟登录

第13章 Issue & PR & Git & Github

1 课程概要 1分钟登录

2 Issue 14.9分钟登录

3 Pull Request 4.3分钟登录

4 GitHub & Git 10.6分钟登录

5 导入Spark源码到IDEA 6.9分钟登录

第14章 Spark源码分析

1 Standalone模式集群架构 5.8分钟登录

2 Master启动过程分析 24.7分钟登录

3 Worker启动流程分析 20.2分钟登录

第15章 Spark源码分析续

1 课程概要 0.7分钟登录

2 spark-shell脚本分析及sc与sqlContext的创建 16.4分钟登录

3 SparkContext启动过程 23.6分钟登录

4 job提交过程 21.7分钟登录

第16章 Tachyon

1 课程概要 0.6分钟登录

2 Tachyon概述 12.5分钟登录

3 Tachyon工作原理 8.1分钟登录

4 Tachyon部署和使用 22.7分钟登录

5 Tachyon集成Spark&MapReduce 15.3分钟登录

邀请好友注册，两人同时获得7天会员权益！可累计！

面向未来的技术人才教育

客服电话

010-86468343

成熟方案提高技术团队开发效率

引进企业项目助力新工科