《大數據Hadoop開發(fā)培訓實踐培訓班》課程詳情
點擊下載課大綱及報名表 為響應工業(yè)和信息化部信息化高端人才培養(yǎng)的號召，特推出了Hadoop技術架構課程培訓班，希望通過專業(yè)的Hadoop技術架構體系與業(yè)界真實案例來全面提高大數據工程師、設計人員的工作水平，旨在培養(yǎng)專業(yè)Hadoop技術架構專家，更好地服務于大數據開發(fā)。

培訓特色
項目全過程Hadoop沙盤模擬實戰(zhàn)。通過一個完整的大數據開發(fā)項目及一組實際項目案例，完全覆蓋Hadoop開發(fā)過程的各個技術體系的實踐應用。該項目是一個課堂實踐項目，以項目小組的形式進行沙盤實操練習，重點在于強化理解Hadoop項目各個階段的工作重點，同時明確并強化作為項目管理者的一些基本素質。

強調互動式教學、強化團隊討論，力爭每一個學員在課程中都有上臺發(fā)言的機會，將有超過50% - 70% 的時間用于討論、練習及游戲（具體比例可視學員的情況進行調整）。但這一做法需要學員的積極參與，盡可能地將實際項目中地各種問題拿出來討論，這要求學員前期做一定地準備工作。

培訓目標
1、了解Hadoop的歷史及目前發(fā)展的現狀、以及Hadoop的技術特點，從而把握分布式計算框架及未來發(fā)展方向，在大數據時代能為企業(yè)的技術選型及架構設計提供決策參考。

2、全面掌握Hadoop的架構原理和使用場景，并通過貫穿課程的項目進行實戰(zhàn)鍛煉，從而熟練使用Hadoop進行MapReduce程序開發(fā)。課程還涵蓋了分布式計算領域的常用算法介紹，幫助學員為企業(yè)在利用大數據方面體現自身價值。

3、深入理解Hadoop技術架構,對Hadoop運作機制有清晰全面的認識，可以獨立規(guī)劃及部署生產環(huán)境的Hadoop集群，掌握Hadoop基本運維思路和方法，對Hadoop集群進行管理和優(yōu)化。

培訓證書
本課程頒發(fā)《大數據Hadoop開發(fā)高級架構師》證書。
證書可作為專業(yè)技術人員職業(yè)能力考核的證明，以及專業(yè)技術人員崗位聘用、任職、定級和晉升職務的重要依據。


課程大綱
日程
培訓模塊
培訓要點
第一天
上午
一、Hadoop入門，了解什么是hadoop
1、 Hadoop產生背景
2、 Hadoop在大數據、云計算中的位置和關系
3、 國內外Hadoop應用案例介紹
4、 國內Hadoop的就業(yè)情況分析及課程大綱介紹
5、 分布式系統(tǒng)概述
6、 Hadoop生態(tài)圈以及各組成部分的簡介
7、 Hadoop核心MapReduce例子說明
二、分布式文件系統(tǒng)HDFS，是數據庫管理員的基礎課程
1、 分布式文件系統(tǒng)DFS簡介
2、 HDFS的系統(tǒng)組成介紹
3、 HDFS的組成部分詳解
4、 副本存放策略及路由規(guī)則
5、 NameNode Federation
6、 命令行接口
7、 Java接口
8、 客戶端與HDFS的數據流講解
9、 HDFS的可用性（HA）
第一天
下午
三、初級MapReduce，成為Hadoop開發(fā)人員的基礎課程
1、 如何理解map、reduce計算模型
2、 剖析偽分布式下MapReduce作業(yè)的執(zhí)行過程
3、 Yarn模型
4、 序列化
5、 MapReduce的類型與格式
6、 MapReduce開發(fā)環(huán)境搭建
7、 MapReduce應用開發(fā)
8、 更多示例講解，熟悉MapReduce算法原理
第二天
上午
四、高級MapReduce，高級Hadoop開發(fā)人員的關鍵課程
1、 使用壓縮分隔減少輸入規(guī)模
2、 利用Combiner減少中間數據
3、 編寫Partitioner優(yōu)化負載均衡
4、 如何自定義排序規(guī)則
5、 如何自定義分組規(guī)則
6、 MapReduce優(yōu)化
7、 編程實戰(zhàn)
五、Hadoop集群與管理，是數據庫管理員的高級課程
1、 Hadoop集群的搭建
2、 Hadoop集群的監(jiān)控
3、 Hadoop集群的管理
4、集群下運行MapReduce程序
六、ZooKeeper基礎知識，構建分布式系統(tǒng)的基礎框架
1、ZooKeeper體現結構
2、ZooKeeper集群的安裝
3、操作ZooKeeper
第二天
下午
七、HBase基礎知識，面向列的實時分布式數據庫
1、 HBase定義
2、 HBase與RDBMS的對比
3、 數據模型
4、 系統(tǒng)架構
5、HBase上的MapReduce
6、表的設計
八、HBase集群及其管理
1、集群的搭建過程講解
2、集群的監(jiān)控
3、集群的管理
九、HBase客戶端
1、 HBase Shell以及演示
2、Java客戶端以及代碼演示
第三天
上午
十、Pig基礎知識，進行hadoop計算的另一種框架
1、 Pig概述
2、 安裝Pig
3、 使用Pig完成手機流量統(tǒng)計業(yè)務
十一、Hive，使用sql進行計算的hadoop框架
1、 數據倉庫基礎知識
2、 Hive定義
3、 Hive體系結構簡介
4、 Hive集群
5、 客戶端簡介
6、 HiveQL定義
7、 HiveQL與SQL的比較
8、 數據類型
9、表與表分區(qū)概念
10、表的操作與CLI客戶端演示
11、數據導入與CLI客戶端演示
12、查詢數據與CLI客戶端演示
13、數據的連接與CLI客戶端演示
14、用戶自定義函數（UDF）的開發(fā)與演示
第三天
下午
十二、Sqoop，hadoop與rdbms進行數據轉換的框架
1、配置Sqoop
2、使用Sqoop把數據從mysql導入到HDFS中
3、使用Sqoop把數據從HDFS導出到mysql中
十三、大數據實戰(zhàn)
大數據完整項目架構和開發(fā)過程練習


講師簡介
錢興會 大數據專家。在電信、電力、金融行業(yè)從事Java開發(fā)和架構設計的工作；資深云計算研發(fā)工程師。作為項目的主要成員和負責人參與并領導完成了多個大型復雜項目，并成功應用于行業(yè)解決方案，如海量數據匹配系統(tǒng)、電力行業(yè)實時數據采集分析系統(tǒng)等。設計并實現了實時索引系統(tǒng)-云搜，成功應用與某國企知識庫系統(tǒng)。并可應用與互聯網行業(yè)的搜索等應用。完成多個云計算解決方案的架構，涉及到金融行業(yè)海量數據分析與數據處理系統(tǒng)、海量日志分析系統(tǒng)、電力用電信息統(tǒng)計系統(tǒng)等，獲得業(yè)界認可。

鐘運琴 任職于某研究所，中國科學院計算技術研究所攻讀計算機系統(tǒng)結構博士學位。從 2008 年 12 月起，主要從事云計算和大規(guī)模數據管理方面的研究，精通云計算平臺和大規(guī)模數據庫管理系統(tǒng)內部實現細節(jié)，包括Hadoop、鍵值存儲系統(tǒng)（KVS） 、NoSQL (HBase、Cassandra、Membase/ Memcached)數據庫和數據倉庫(HIVE)。


課程對象
需要使用Apache Hadoop來開發(fā)功能強大的數據分析應用的程序開發(fā)人員；Hadoop項目規(guī)劃的咨詢師；需要快速掌握Hadoop周邊組件開發(fā)的人員；需要掌握Java、Linux。

《大數據Hadoop開發(fā)培訓實踐培訓班》所屬分類
研發(fā)項目

《大數據Hadoop開發(fā)培訓實踐培訓班》所屬專題
excel培訓、營銷數據分析、新媒體營銷培訓、

《大數據Hadoop開發(fā)培訓實踐培訓班》授課培訓師簡介

《大數據Hadoop開發(fā)培訓實踐培訓班》報名服務流程

-----------------------------------------------------------------------------------