實(shí)戰基于開(kāi)源平臺的大數據開(kāi)發(fā)與運維

時(shí)間 一級 二級 細節
第1天上午 任務(wù)1 (思想) 前導與模擬項目 　
學(xué)習方法 　
敏捷開(kāi)發(fā) 　
所需工具 相關(guān)的鏡像設備進(jìn)行發(fā)放
課程技術(shù)描述 Linux與Hadoop
HDFS
Java+MapReduce
Hive+Sqoop+Hadoop+mysql
Hive+Sqoop+Hbase+mysql
JavaWeb+Hadoop
Hadoop+Spark+SparkSQL
Flume+Kafka+Spark+Spark Streaming
任務(wù)2 (大數據技術(shù)點(diǎn)) Hadoop-Spark(Storm)發(fā)展歷史 　
大數據廠(chǎng)商對比 Apache
Cloudera
Hortonworks
開(kāi)源大數據的一線(xiàn)場(chǎng)景 　
現場(chǎng)討論 　
任務(wù)3 (Linux與Hadoop2) Linux歷史、目前實(shí)用版本 　
概述基于Linux集群的Hadoop2的安裝與配置 　
Hadoop的Web界面的介紹 　
基于Hadoop2的Linux實(shí)用命令介紹 　
現場(chǎng)實(shí)戰 　
任務(wù)4 (HDFS) 主要功能 　
架構與運行方式 　
關(guān)鍵技術(shù) NameNode
DataNOde
Java與HDFS API 　
現場(chǎng)實(shí)戰 　
第1天下午 任務(wù)5 (MapReduce) 主要工作方式理解 　
官方wordCount的MR分析 　
實(shí)戰Java+MapReduce 員工工資求和的MR計算
員工工資求平均的MR計算
模仿并改造自己的項目 　
任務(wù)6 (開(kāi)源平臺介紹) 運維管理HUE平臺 　
運維管理Ambari平臺 　
運維系統Ganglia、Nagios的應用 　
任務(wù)7 (Hadoop生態(tài)系統 其他軟件介紹) Hive 是什么?
概述配置
能解決什么一線(xiàn)問(wèn)題
經(jīng)常和那些軟件結合
Sqoop 是什么?
概述配置
能解決什么一線(xiàn)問(wèn)題
經(jīng)常和那些軟件結合
Hbase 是什么?
概述配置
能解決什么一線(xiàn)問(wèn)題
經(jīng)常和那些軟件結合
第2天上午 Flume 是什么?
概述配置
能解決什么一線(xiàn)問(wèn)題
經(jīng)常和那些軟件結合
Kafka 是什么?
概述配置
能解決什么一線(xiàn)問(wèn)題
經(jīng)常和那些軟件結合
任務(wù)8 (Hive+Sqoop+Hadoop+mysql) 能解決什么問(wèn)題？ 　
實(shí)戰1抽取數據到Hadoop,調用Hive來(lái)查詢(xún) 　
實(shí)戰2之將HDFS的結果寫(xiě)回到MySQL 　
模仿并改造自己的項目 　
任務(wù)9 (Hive+Sqoop+Hbase+mysql) 能解決什么問(wèn)題？ 　
實(shí)戰1抽取數據到HBase,調用Hive來(lái)查詢(xún) 　
實(shí)戰2之將HBase的結果寫(xiě)回到MySQL 　
模仿并改造自己的項目 　
第2天下午 任務(wù)10 (JavaWeb+Hadoop) 能解決什么問(wèn)題？ 　
實(shí)戰1使用JavaWeb讀取Hadoop的結果并進(jìn)行圖表展現 　
模仿并改造自己的項目 　
任務(wù)11 (Hadoop+Spark+SparkSQL) 能解決什么問(wèn)題？ 　
實(shí)戰1之SparkSQL對海量數據的訪(fǎng)問(wèn) 　
模仿并改造自己的項目 　
任務(wù)12 (Flume+Kafka+Spark+Spark Streaming) 能解決什么問(wèn)題？ 　
實(shí)戰1之基于內存的流計算 　
模仿并改造自己的項目 　
任務(wù)13 (拓展) 基于Spark Mlib的算法數據分析 　
介紹Tensorflow 　
介紹Caffee 　
Spark新技術(shù)、AI面向未來(lái)應用 　 

天津大學(xué)(雙本)
英語(yǔ)、德語(yǔ)
微軟認證講師
微軟金牌講師4年德國留學(xué)
15年應用開(kāi)發(fā)和數據處理從業(yè)經(jīng)歷
國內使用Python作為數據處理工具的先行者
曾任職阿里擔任架構師、搜狐擔任軟件工程師
參與多個(gè)大型項目、為全國各個(gè)培訓機構提供需求分析、各類(lèi)軟件開(kāi)發(fā)、軟件架構

專(zhuān)業(yè)背景
軟件服務(wù)外包開(kāi)發(fā)公司(開(kāi)發(fā)以及團隊管理)經(jīng)驗
曾任職阿里擔任架構師 3年
搜狐擔任軟件工程師 2年
天津經(jīng)濟技術(shù)開(kāi)發(fā)區政府部門(mén)軟件系統開(kāi)發(fā)維護經(jīng)驗(開(kāi)發(fā)以及團隊管理)
德國留學(xué)4年
天津經(jīng)濟技術(shù)開(kāi)發(fā)區大型制造型企業(yè)內部軟件平臺開(kāi)發(fā)維護經(jīng)驗
15年培訓行業(yè)經(jīng)驗
主要課程
《軟件全棧開(kāi)發(fā)》
《Linux 應用與發(fā)展》
《大數據 與Spark實(shí)戰》
《Python程序編碼語(yǔ)言培訓》
《面向架構師的互聯(lián)網(wǎng)平臺架構設計》
《微服務(wù)架構與技術(shù)》
《基于大數據的企業(yè)運維》
《Android8.0項目開(kāi)發(fā)實(shí)戰》
強項授課

授課特點(diǎn)：
課程都是實(shí)戰性課程,培訓的宗旨是要進(jìn)行課程的落地，通過(guò)接地氣的項目實(shí)戰，來(lái)使培訓者能夠從一個(gè)小項目入手，然后逐步擴大自己的視覺(jué)，完成最后的實(shí)戰開(kāi)發(fā)，以下的內容有別于以往的純技術(shù)點(diǎn)授課！
講師授課感受：
1.技術(shù)在于分享,用心做好每一件事情
2.不能忽悠受眾者
3.授課前需要了解客戶(hù)的課程后的真實(shí)的需求
4.根據用戶(hù)的需求來(lái)有針對性的制定有效的課程大綱
5.加強課程的互動(dòng)性，每天的課程每個(gè)受眾者平均會(huì )溝通至少10次以上
6.根據情況會(huì )安排所有的受眾者撰寫(xiě)每日的培訓日志總結
7.課堂上需要隨機應變和現場(chǎng)發(fā)揮，來(lái)解答受眾者的問(wèn)題，對于未能解答的問(wèn)題保留相關(guān)的聯(lián)系方式尋求在24-48小時(shí)內給出有效的解決方案
8.課堂上某些案例可以根據受眾者的實(shí)際的最終需求來(lái)模擬編寫(xiě)，這樣，在課程結束后，受眾者會(huì )有一個(gè)大體的需求完成的輪廓
9.對一些該技術(shù)領(lǐng)域的新技術(shù)的總結和探索
10.一切不變的就是變化，所有的內容會(huì )切以實(shí)際的以需求為準來(lái)應對