·?Scala語(yǔ)言介紹

·?Scala語(yǔ)言安裝

·?Scala快速入門介紹

·?什么Spark

·?Spark的簡(jiǎn)介

·?Spark的編譯

·?Spark的安裝

Spark安裝成功測(cè)試

·?Spark原理

·?Spark的RDD

·?什么是RDD

·?RDD的種類?

o?Tranformation

o?Action

·?Spark的存儲(chǔ)級(jí)別

·?Cache介紹

·?Spark的容錯(cuò)原理

·?Lineage容錯(cuò)

·?Checkpoint容錯(cuò)

·?RDD的創(chuàng)建

·?案例?

統(tǒng)計(jì)單詞的個(gè)數(shù)

·?Spark調(diào)度組件

·?RDD?graph

·?作業(yè)與任務(wù)調(diào)度

·?DAG?Scheduler

·?Task?Scheduler

·?Task細(xì)節(jié)

·?Job的調(diào)度流程

·?Broadcast?variables介紹

·?Spark的優(yōu)化

·?Spark的生態(tài)系統(tǒng)?

o?Shark

o?Streaming

·?Spark與hadoop的比較

Spark的使用場(chǎng)景介紹

·?Spark實(shí)戰(zhàn)一：求最大值

·?Spark實(shí)戰(zhàn)二：自定義RDD(define?a?new?RDD)

·?Spark實(shí)戰(zhàn)三：RDD創(chuàng)建的種類(Scala、HDFS、localdisk?and?inputformat)

Spark實(shí)戰(zhàn)四：基于Spark的日志分析