課程簡介:
更加成熟的技術,云計算技術日新月異,不需要多久就會發生技術上的革新,這套課程是根據新版的技術大綱來講解
全新hadoop培訓大綱,比之前七天的培訓更加完善,非常適合想從事Hadoop開發學習的朋友們
——————-課程目錄——————-
第一天 hadoop的基本概念 偽分布式hadoop集群安裝 hdfs mapreduce 演示
01-hadoop職位需求狀況.avi
02-hadoop課程安排.avi
03-hadoop應用場景.avi
04-hadoop對海量數據處理的解決思路.avi
05-hadoop版本選擇和偽分布式安裝.avi
06-hadoop版本選擇和偽分布式安裝2.avi
07-hdfs&mapreduce測試.avi
08-hdfs的實現機制初始.avi
09-hdfs的shell操作.avi
10-hadoop集群搭建的無密登陸配置.avi
第二天 hdfs的原理和使用操作、編程
01-NN元數據管理機制.avi
02-NN工作機制2.avi
03-DN工作原理.avi
04-HDFS的JAVA客戶端編寫.avi
05-filesystem設計思想總結.avi
06-hadoop中的RPC框架實現機制.avi
07-hadoop中的RPC應用實例demo.avi
08-hdfs下載數據源碼跟蹤鋪墊.avi
09-hdfs下載數據源碼分析-getFileSystem.avi
10-hdfs下載數據源碼分析-getFileSystem2.avi
第三天 mapreduce的原理和編程
01-hdfs源碼跟蹤之打開輸入流.avi
02-hdfs源碼跟蹤之打開輸入流總結.avi
03-mapreduce介紹及wordcount.avi
04-wordcount的編寫和提交集群運行.avi
05-mr程序的本地運行模式.avi
06-job提交的邏輯及YARN框架的技術機制.avi
07-MR程序的幾種提交運行模式.avi
08-YARN的通用性意義.avi
09-yarn的job提交流程.avi
第四天 常見mr算法實現和shuffle的機制
01-復習.avi
02-hadoop中的序列化機制.avi
03-流量求和mr程序開發.avi
04-hadoop的自定義排序實現.avi
05-mr程序中自定義分組的實現.avi
06-shuffle機制.avi
07-mr程序的組件全貌.avi
08-textinputformat對切片規劃的源碼分析.avi
09-倒排索引的mr實現.avi
10-多個job在同一個main方法中提交.avi
第五天 hadoop2.x中HA機制的原理和全分布式集群安裝部署及維護
01-zookeeper.avi
02-zookeeper2.avi
03-NN高可用方案的要點1.avi
04-hadoop-HA機制的配置文件.avi
05-hadoop分布式集群HA模式部署.avi
06-hdfs–HA測試.avi
07-hdfs–動態增加節點和副本數量管理.avi
08-HA的java api訪問要點.avi
09-hive入門.avi
第六天 hbase hive
01-復習ha相關.avi
02-hive的元數據庫mysql方式安裝配置.avi
03-hive的使用.avi
04-hive的常用語法.avi
05-hql語法及自定義函數.avi
06-hbase表結構.avi
07-hbase集群架構及表存儲機制.avi
08-hbase-shell.avi
09-hbase的java api.avi
第七天 storm+kafka
006-kafka整合storm.avi
01-storm基本概念.avi
02-storm編程規范及demo編寫.avi
03-storm的topology提交執行.avi
04-kafka介紹.avi
05-kafuka集群部署及客戶端編程.avi
06-kafka消費者java客戶端編程.avi
第八天 實戰項目
01-項目背景及技術架構.avi
02-主要技術選型.avi
03-flume介紹及演示.avi
04-行為軌跡增強處理流程.avi
05-樣本url篩選模塊開發.avi
06-行為軌跡增強模塊1.avi
07-行為軌跡增強模塊2.avi