大数据分析师LEVEL ll 复习大纲篇 | 第五章 大数据分析之 Spark 工具及实战(一)
更新时间:2019-09-25 10:12:06
来源:环球网校
浏览
收藏
摘要 对于数据分析师这一职位,很多人都希望在考试前了解他的考试形式和要求,今天环球网校小编就带大家了解大数据分析师 level 2 证书考试的相关内容,希望对大家有所帮助。
第一节、Spark 基础理论
【领会】
Spark 大数据生态系统的功能与结构
Spark、Hadoop 之间的区别与联系
Spark 大数据生态系统的特点
Scala 基本语法
【熟知】
Spark 生态系统中的四大核心组件
Spark 与 MapReduce 的对比与分析
Spark 与 MapReduce 适用的应用场景
Spark 的多种运行模式
【应用】
熟练掌握 Standalone 模式下 Spark 集群的搭建步骤
配置文件中参数的具体含义
第二节、Spark RDD 基本概念与常用操作
【领会】
SparkRDD 基本概念
SparkAPI
Spark 任务调度策略
【熟知】
SparkRDD 的特性
RDD 上的转换操作、执行操作、持久化操作
RDD 之间的宽依赖关系与窄依赖关系
【应用】
基于 Spark API 编写词频统计程序,并在词频统计程序基础上进行功能扩展,
SparkContext、TaskScheduler、DAGScheduler 等核心代码的分析与调试。
这就是大纲第五章的内容,希望对大家能有所帮助。
编辑推荐
最新资讯
- 数据科学家 level3 的考试形式与试卷要求2019-09-26
- 数据科学家 level3 的考试分数占比2019-09-26
- 大数据分析师LEVEL ll 复习大纲篇 | 第二章 Hadoop 理论(二)2019-09-25
- 大数据分析师LEVEL ll 复习大纲篇 | 第三章 大数据分析之数据库理论及工具(一)2019-09-25
- 大数据分析师LEVEL ll 复习大纲篇 | 第一章 大数据基础理论(二)2019-09-25
- 大数据分析师LEVEL ll 复习大纲篇 | 第二章 Hadoop 理论(一)2019-09-25
- 大数据分析师 level2 的考试大纲(一)——考试形式与试卷要求2019-09-25
- 大数据分析师LEVEL ll 复习大纲篇 | 第一章 大数据基础理论(一)2019-09-25
- 大数据分析师LEVEL ll 复习大纲篇 | 第三章 大数据分析之数据库理论及工具(一)2019-09-25
- 大数据分析师LEVEL ll 复习大纲篇 | 第三章 大数据分析之数据库理论及工具(一)2019-09-25