萬和大數據課程體系

課程設置無縫對接企業用人需求，萬和四個月，勝讀四年書

大數據基礎

大數據基礎

1.什么是大數據？-大數據概念； 2.大數據主要分類類型； 3.大數據和普通數據的區別；

大數據現狀

1.現有企業應用場景； 2.大數據生態圈介紹；

群組討論

1."自我定義的大數據"-群組討論； 2.學員技能摸底，情況歸檔；

Linux基礎

Linux基本命令解析

1.熟悉Linux歷史背景； 2.了解Linux基本命令；

虛擬機-Centos安裝

1.安裝虛擬機； 2.安裝Mvn，Jdk等工具

Zookeeper

Zookeeper熟悉和用途綜述

1.Z****eper介紹 2.Z****eper基礎知識 3.體系結構 4.數據模型

Zookeeper環境搭建

1.集群搭建和測試 2.命令行客戶端操作 3.**at

Zookeeper開發

1.*****es、Node詳解 2.*PI介紹 3.**va Client開發 4.實戰內容（現場實驗環節）

Zookeeper集群搭建、 命令行Client操作

1.Z****eper 節點類型與體系結構 2.Z****eper Watch 3.Z****eper 與 HBase 的關系 4.Z****eper 更新Server 實例實現 5.Z****eper 分布式鎖

Hbase數據庫

Hbase熟悉和用途綜述

1.***se介紹 2.***se基礎知識 3.體系結構 4.數據模型

Hbase環境搭建

1.集群搭建和測試 2.命令行客戶端操作 3.**at

Hbase開發

1.***se增刪改查 2.***se的基礎get，scanner等命令

Hadoop

hadoop的前世今生

1.大數據背景及hadoop出現的契機 2.****op概述 3.****op生態系統 4.****op分布式文件系統HDFS 5.****op計算框架MapReduce 6.****op版本發展歷史 7.****op行業應用案例分析 8.****op與云計算和大數據的關系

hadoop的前世今生

1.****op 核心組件簡單介紹 2.****op 部署角色簡單介紹 3.****op 試驗集群的部署結構 4.****op 安裝依賴關系 5.****op 生產環境的部署結構 6.****op 集群部署 7.****op 高可用配置方法 8.****op 集群簡單測試方法 9.****op 集群異常debug方法

hadoop YARN架構設計和核心概念

1.**RN的出現的背景 2.**RN的設計思想和背景 3.**RN的基礎架構 4.**RN的工作流程 5.**RN的基礎類庫詳解 6.**RN的核心模塊ApplicationMaster詳解 7.**RN的核心模塊ResourseManager剖析 8.**RN的核心模塊NodeManager詳解 9.**RN 資源調度器詳細介紹

Spark

Spark的發展歷程

1.大數據背景及sPARK出現的契機 2.***rk概述 3.***rk生態系統 4.***rk核心組件原理和架構 5.***rk分布式文件系統HDFS 6.***rk計算核心算法 7.***rk部署角色 8.***rk版本發展歷史 9.***rk行業應用案例分析

安裝Spark

1.***rk 核心組件簡單介紹 2.***rk 部署角色簡單介紹 3.***rk 試驗集群的部署結構 4.***rk 安裝依賴關系 5.***rk 生產環境的部署結構 6.***rk 集群部署 7.***rk 高可用配置方法 8.實戰內容（現場實驗環節）

Spark 部署模式剖析

1.***rk的工作流程 2.***rk的多種調度模式區別 3.***rk的調度通信機制

Spark 高級編程,Spark Streaming高級編程

1.***rk 核心API介紹 2.****le 算法介紹 3.***rk異常回滾機制介紹 4.***rk Sql剖析 5.***rk Streaming剖析 6.***rk RDD剖析 7.實戰內容（現場實驗環節）

Spark 及Spring搭配

1.***rk和Spring集成 2.實戰內容（現場實驗環節）

Spark編程模型及調優

1.***rk編程模型及調優 2.實戰內容（現場實驗環節）

storm

Storm基礎知識

1.包括storm基本概念 2.***rm應用場景 3.應用現狀和發展趨勢 4.***rm與hadoop的區別

Storm的架構與原理

1.****us進程與Supervisor進程 2.***rm集群環境搭建 3.z****eper集群的搭建 4.***rm配置文件配置項講解 5.***rm常用組件和編程API 6.******gy、Spout、Bolt、Storm分組策略 7.（Stream Groupings） 8.***rm項目maven環境的搭建 9.實戰內容（現場實驗環節）

storm可靠性機制

1.消息處理的含義 2.***rm的ack/fail機制 3.***rm如何保證可靠性 4.***rm如何實現可靠性

storm高并發策略

1.工作進程、執行器與任務的區別 2.配置topology的并行度 3.******gy實例 4.如何改變運行中topology的并行度

流分組

1.什么是流分組 2.6種不同的流分組方式

組件詳解

1.基本接口:IComponent接口、ISpout接口、IBolt接口、IRichSpout接口、IRichBolt接口、IBasicBolt接口、IStateSpout、IRichStateSpout接口 2.基本抽象類:BaseComponent抽象類、BaseRichSpout抽象類、BaseRichBolt抽象類、BaseBasicBolt抽象類

storm批處理事務處理

1.***rm批處理詳解 2.***rm事務工作原理深入講解 3.***rm事務相關API詳解 4.***rm事務案例分析 5.***rm分區事務與不透明分區事務

Kafka

kafka概述

1.***ka是什么:kafka概念詳解：Topics/logs、Distributitions、Producers、Consumers、Guarantees。 2.***ka的應用場景 3.***ka的體系架構與設計原理

kafka的安裝部署

1.***ka集群環境的搭建 2.***ka配置項的配置與講解 3.分布與訂閱的原理 4.分布與訂閱的接口

kafka使用zookeeper進行協調管理

1.z****eper在kafka中的作用 2.z****eper如何進行協調管理