Hadoop源碼解析與開發實戰視頻教程
2024-07-21 02:52:43
供稿：網友
課程介紹：整套課程從hadoop入門開始，由淺入深，內置“hadoop源碼解析與企業應用開發實戰”，“Hive開發實戰”，“Hbase開發實戰”，“Spark，mahout，sqoop，storm諸模塊開發實戰”。因為這個課程有4個板塊組成，所以學員可以按照自己的實際情況選擇學習。例如，對于只需要了解hadoop基本編程的人，只需要選擇“hadoop源碼解析與企業應用開發實戰”模塊就可以了；對于立志于從事大數據領域的零起點人員，可以選擇四個板塊依次學習；對于已經有一定基礎的hadoop開發人員，你可以根據自己的情況，選擇學習模塊，而不必4個板塊從頭開始學。第一部分內容：I. Hadoop的起源與生態系統介紹。要點：了解什么是大數據；Google的三篇論文；圍繞Hadoop形成的一系列的生態系統；各個子項目簡要介紹II. Hadoop集群配置與搭建。要點：Hadoop安裝與部署；如何寫配置文件；運行簡單的Wordcount程序；Hadoop程序結構介紹 實戰：Hadoop系統的安裝與部署；編寫配置文件；編寫運行簡單的wordcount程序。預期收獲：了解什么是大數據以及大數據和hadoop的關系；了解hadoop本身；學會Hadoop系統的安裝和部署；學會配置hadoop系統；學會編寫簡單的wordcount程序；第二部分內容：III. Common組件和HDFS組件原理及體系結構介紹。要點：Hadoop IO機制；序列化；壓縮；RPC；HDFS副本機制；HDFS讀寫機制；塊選擇策略；預期收獲：掌握common組件和HDFS組件；了解Hadoop的IO機制；第三部分內容：IV. MaPReduce2.0組件原理及體系架構介紹。要點：MapReduce工作原理；類型與格式；JT內部實現；TT內部實現；Task運行過程分析；V. MapReduce2.0編程實戰。要點：Pipes編程；Streaming編程；動手編寫MapReduce程序；實戰：MapReduce2.0編程（Pipes，Streaming）；編寫MapReduce程序；預期收獲：徹底掌握MapReduce這個關鍵模塊；第四部分內容：VI. Hadoop集群管理與安全機制分析。要點：Hadoop集群管理機制；Hadoop現有安全機制VII. YARN及ResourcManager組件。要點：YARN/MRv2環境搭建與部署；ResourceManager組件的分析與實戰；實戰：動手搭建YARN環境預期收獲：掌握Hadoop的集群管理機制；了解Hadoop現有的安全機制；掌握YARN和ResourceManager組件。-------------------課程目錄------------------- 課時1 免費試聽.doc 課時2 免費試聽二.doc 課時3 付費學員服務指引.doc 課時4 課前環境準備.doc 課時5 參考資料.doc 課時6 Hadoop開源軟件及其生態系統.avi 課時7 HDFS集群的安裝與部署.avi 課時8 MapReduce集群的安裝與部署.avi 課時9 閱讀練習Hadoop 偽分布式集群部署參考文檔.pdf 課時9 閱讀練習ssh實現linux無密碼訪問.pdf 課時10 第一周練習.doc 課時11 Hadoop架構答疑.avi 課時12 HDFS架構、SNN、副本放置策略.avi 課時13 HDFS API.avi 課時14 練習2：HDFS組件分析1.doc 課時15 本周答疑.avi 課時16 準備：JNI編程基礎.avi 課時17 Hadoop IO.avi 課時18 HDFS 壓縮.avi 課時19 HDFS 完整性.avi 課時20 HDFS 序列化.avi 課時21 練習3 HDFS 詳細分析2.doc 課時22 HDFS 基于文件的數據結構.avi 課時23 Hadoop RPC 遠程方法調用.avi 課時24 練習4.doc 課時25 MapReduce API 及工作流程(1).avi 課時25 MapReduce API 及工作流程（2）.avi 課時26 MapReduce工作原理（2）：錯誤處理、作業調度、Shuffle和Sort.avi 課時27 MapReduce類型與格式(1).avi 課時27 MapReduce類型與格式(2).avi 課時28 練習5：MapReduce工作原理、流程.doc 課時29 MapReduce重要組件_ MapReduce Combiner組件分析.avi 課時30 MapReduce重要組件_ MapReduce Partitioner組件.avi 課時31 MapReduce重要組件_ MapReduce Recordreader組件(2).avi 課時32 練習6：MapReduce重要組件.doc 課時33 MapReduce計數器.avi 課時34 MapReduceJoin.avi 課時35 Map端Join.avi 課時36 MapReduce Sort.avi 課時37 Hadoop Pipes_Streaming高級編程.avi 課時38 練習7：MapReduce編程.doc 課時39 Hadoop 集群管理與安全.avi 課時40 Hbase.avi 課時41 練習8：HBase.doc 課時42 Yarn基礎.avi 課時43 spark講解.avi下載地址：http://feixueteam.net/thread-1093-1-1.html
