当前位置:艾威培训主页 > 云计算与大数据 > Spark培训 > 一天征服Spark培训课程 >
一天征服Spark培训课程
课程介绍：
课程对象：
1，云计算大数据从业者；2，Hadoop使用者；
3，系统架构师、系统分析师、高级程序员、资深开发人员；
4，牵涉到大数据处理的数据中心运行、规划、设计负责人；
5，政府机关，金融保险、移动和互联网等大数据来源单位的负责人；
6，高校、科研院所涉及到大数据与分布式数据处理的项目负责人；
7，数据仓库管理人员、建模人员，分析和开发人员、系统管理人员、数据库管理人员以及对数据仓库感兴趣的其他人员；
课程时长：1天
课程方式：
课程大纲：
第1堂课：Spark的架构设计
1.1 Spark生态系统剖析
1.2 Spark的架构设计剖析
1.3 RDD计算流程解析
1.4 Spark的出色容错机制
第2堂课：Spark编程模型
2.1 RDD
2.2 transformation
2.3 action
2.4 lineage
2.5宽依赖与窄依赖
第3堂课：深入Spark内核
3.1 Spark集群
3.2 任务调度
3.3 DAGScheduler
3.4 TaskScheduler
3.5 Task内部揭秘
第4堂课：深入实战RDD
4.1 DAG
4.2 深入实战各种Scala RDD Function
4.3 Spark Java RDD Function
4.4 RDD的优化问题
第5堂课：Spark的机器学习
5.1 LinearRegression
5.2 K-Means
5.3 Collaborative Filtering
第6堂课：Spark的图计算GraphX
6.1 Table Operators
6.2 Graph Operators
6.3 GraphX
第7堂课：Spark SQL
7.1 Parquet支持
7.2 DSL
7.3 SQL on RDD
第8堂课：Spark实时流处理
8.1 DStream
8.2 transformation
8.3 checkpoint
8.4 性能优化
第9堂课：Spark on Yarn
9.1 Spark on Yarn的架构原理
9.2 Spark on Yarn的最佳实践
第10堂课：JobServer
10.1 JobServer的架构设计
10.2 JobServer提供的接口
10.3 JobServer最佳实践
第11堂课：SparkR
11.1 SparkR的原理与实现
11.2 SparkR动手实践
第12堂课：Tachyon
12.1 Tachyon原理与架构
12.2 Tachyon动手实践
第13堂课：Spark多语言编程
13.1 使用Scala编写Spark程序
13.2使用Python编写Spark程序
13.3使用Java编写Spark程序
第14堂课：Spark项目案例实战
14.1 Spark项目的最佳架构模式
14.2 案例的介绍和技术实现
1.1 Spark生态系统剖析
1.2 Spark的架构设计剖析
1.3 RDD计算流程解析
1.4 Spark的出色容错机制
第2堂课：Spark编程模型
2.1 RDD
2.2 transformation
2.3 action
2.4 lineage
2.5宽依赖与窄依赖
第3堂课：深入Spark内核
3.1 Spark集群
3.2 任务调度
3.3 DAGScheduler
3.4 TaskScheduler
3.5 Task内部揭秘
第4堂课：深入实战RDD
4.1 DAG
4.2 深入实战各种Scala RDD Function
4.3 Spark Java RDD Function
4.4 RDD的优化问题
第5堂课：Spark的机器学习
5.1 LinearRegression
5.2 K-Means
5.3 Collaborative Filtering
第6堂课：Spark的图计算GraphX
6.1 Table Operators
6.2 Graph Operators
6.3 GraphX
第7堂课：Spark SQL
7.1 Parquet支持
7.2 DSL
7.3 SQL on RDD
第8堂课：Spark实时流处理
8.1 DStream
8.2 transformation
8.3 checkpoint
8.4 性能优化
第9堂课：Spark on Yarn
9.1 Spark on Yarn的架构原理
9.2 Spark on Yarn的最佳实践
第10堂课：JobServer
10.1 JobServer的架构设计
10.2 JobServer提供的接口
10.3 JobServer最佳实践
第11堂课：SparkR
11.1 SparkR的原理与实现
11.2 SparkR动手实践
第12堂课：Tachyon
12.1 Tachyon原理与架构
12.2 Tachyon动手实践
第13堂课：Spark多语言编程
13.1 使用Scala编写Spark程序
13.2使用Python编写Spark程序
13.3使用Java编写Spark程序
第14堂课：Spark项目案例实战
14.1 Spark项目的最佳架构模式
14.2 案例的介绍和技术实现
