?大數(shù)據(jù)運(yùn)維系統(tǒng)基礎(chǔ)
大數(shù)據(jù)架構(gòu)概述

1.?大數(shù)據(jù)技術(shù)特點(diǎn)
剖析開源、社區(qū)模式、更新快等特點(diǎn)
2.?大數(shù)據(jù)六層架構(gòu)
介紹大數(shù)據(jù)系統(tǒng)基本架構(gòu)
3. Hadoop與Spark生態(tài)系統(tǒng)概述以及版本演化
概要介紹Hadoop與Spark生態(tài)系統(tǒng)及其版本演化歷史

大數(shù)據(jù)自動(dòng)化運(yùn)維挑戰(zhàn)

1.?大規(guī)模集群
2.?復(fù)雜的軟件棧
3.?問(wèn)題的復(fù)雜性（操作系統(tǒng)、網(wǎng)絡(luò)、軟件、應(yīng)用程序及用戶）

大數(shù)據(jù)運(yùn)維體系

1.?大數(shù)據(jù)運(yùn)維系統(tǒng)特點(diǎn)
2.?大數(shù)據(jù)運(yùn)維系統(tǒng)構(gòu)成
包括自動(dòng)化部署、自動(dòng)化配置管理、監(jiān)控、報(bào)警、自動(dòng)審批系統(tǒng)（存儲(chǔ)空間審核、計(jì)算資源審核）等

大數(shù)據(jù)運(yùn)維常用技術(shù)棧

1. Linux機(jī)器資源監(jiān)控與報(bào)警
ganglia與nagios
2.?常用linux命令
top、free、sar、iostat、nmon、jstack、ssh、rsync等
3. Java基礎(chǔ)
JVM、內(nèi)存管理、GC調(diào)優(yōu)
4.?用戶管理
LDAP系統(tǒng)
5.?自動(dòng)化安裝部署
6. ambari、cloudera manager等

Linux系統(tǒng)基本配置

1.?大數(shù)據(jù)系統(tǒng)對(duì)linux要求
2.?大數(shù)據(jù)系統(tǒng)常見(jiàn)linux配置

?數(shù)據(jù)收集與存儲(chǔ)系統(tǒng)運(yùn)維

分布式數(shù)據(jù)收集系統(tǒng)運(yùn)維

1. flume與sqoop基本架構(gòu)與原理
介紹如何使用flume和sqoop兩個(gè)系統(tǒng)將外部流式數(shù)據(jù)（比如網(wǎng)站日志，用戶行為數(shù)據(jù)等）、關(guān)系型數(shù)據(jù)庫(kù)（比如MySQL、Oracle等）中的數(shù)據(jù)導(dǎo)入Hadoop中進(jìn)行分析和挖掘
2. Flume與sqoop運(yùn)維

分布式存儲(chǔ)系統(tǒng)運(yùn)維

1. HDFS?原理、特性與基本架構(gòu)
2?介紹HDFS原理與架構(gòu)
3 HDFS運(yùn)維
4用戶管理
5存儲(chǔ)空間管理（目錄組織方式、份額設(shè)置等）
6 HDFS冷熱數(shù)據(jù)分析與優(yōu)化
7 NameNode管理
8?動(dòng)態(tài)增加新的結(jié)點(diǎn)
9?嘗試恢復(fù)丟失的數(shù)據(jù)塊
關(guān)鍵參數(shù)設(shè)置（垃圾桶、GC等）
10 HBase原理與基本架構(gòu)
11?介紹HBase應(yīng)用場(chǎng)景、原理和架構(gòu)
12 HDFS運(yùn)維
13?表管理
14?常見(jiàn)參數(shù)調(diào)優(yōu)

?資源管理系統(tǒng)運(yùn)維
資源管理系統(tǒng)YARN基礎(chǔ)

1 YARN產(chǎn)生背景及原理
2 YARN基本架構(gòu)
3 YARN資源調(diào)度器
4?以YARN為核心的生態(tài)

資源管理系統(tǒng)YARN運(yùn)維

1.?參數(shù)配置與調(diào)優(yōu)
2.?用戶管理
3.?資源池劃分
4.?資源監(jiān)控

分布式協(xié)調(diào)服務(wù)Zookeeper

1. Zookeeper產(chǎn)生背景
2. Zookeeper基本架構(gòu)
3. Zookeeper設(shè)計(jì)原理
4. Zookeeper安裝部署及運(yùn)維
5?參數(shù)配置與調(diào)優(yōu)

?分布式計(jì)算框架運(yùn)維

分布式計(jì)算框架概述

1.?批處理計(jì)算框架MapReduce與Spark
2.?交互式分析框架Presto與Impala
3.?流式計(jì)算框架Storm與Spark Streaming

分布式計(jì)算框架（應(yīng)用程序）運(yùn)維

1.?批處理應(yīng)用監(jiān)控指標(biāo)
2.交互式框架運(yùn)維實(shí)踐
3.?流式計(jì)算框架運(yùn)維實(shí)戰(zhàn)

總結(jié)?

大規(guī)模大數(shù)據(jù)集群的運(yùn)維新挑戰(zhàn)與應(yīng)對(duì)方案

1.大規(guī)模集群新挑戰(zhàn)
2.大規(guī)模集群自動(dòng)化運(yùn)維系統(tǒng)