教程名稱:基于大數(shù)據(jù)技術(shù)之電視收視率企業(yè)項目實戰(zhàn)(hadoop+Spark)
教程目錄:
第01節(jié)項目的簡介
第02節(jié)項目的背景
第03節(jié)項目流程演示
第04節(jié)講課的內(nèi)容和對應的知識點
第05節(jié)php展示統(tǒng)計分析之后的數(shù)據(jù)
第06節(jié)大數(shù)據(jù)架構(gòu)介紹并且企業(yè)使用的測試集群環(huán)境和人員配置
第08節(jié)centos的安裝和網(wǎng)絡配置
第09節(jié)通過第三方連接centos的方法
第10節(jié)CentOS的yum源更新已經(jīng)關(guān)閉防火墻
第11節(jié)JAVA的安裝和hadoop安裝
第12節(jié)完全分布式搭建(上)
第13節(jié)完全分布式搭建(下)
第14節(jié)通過hadoop自帶的demo運行單詞統(tǒng)計
第15節(jié)寫一個sh腳本,可以通過一臺機器控制多臺機器
第16節(jié)hadoop常用的命令簡單介紹
第17節(jié)maven的安裝
第18節(jié)maven的使用時出現(xiàn)的問題以及解決問題方法
第19節(jié)MAPREDUCE 示例編寫及編程規(guī)范
第20節(jié)安裝時間同步工具,讓所有電腦進行同步
第21節(jié)Hive簡介和工作流程
第22節(jié)Mysql的安裝,centos7安裝mysql注意點
第23節(jié)安裝Hive,并且使用Hive做一個小案例
第24節(jié)把txt文件的數(shù)據(jù)導入到Hive表中
第25節(jié)Flume采集系統(tǒng)結(jié)構(gòu)圖
第26節(jié)Flume的安裝部署和實戰(zhàn)
第27節(jié)sqoop數(shù)據(jù)遷移和安裝
第28節(jié)sqoop數(shù)據(jù)從hadoop里面導入到mysql里面
第29節(jié)sqoop數(shù)據(jù)從mysql里面導入到hadoop里面
第30節(jié)Azkaban介紹和安裝
第31節(jié)Azkaban創(chuàng)建SSL配置和配置文件
第32節(jié)Azkaban實戰(zhàn)通過5個不同場景介紹原理
第33節(jié)電視采集項目流程篇之通過linux日志收集數(shù)據(jù)到hdfs上面
第34節(jié)電視采集項目流程篇之通過MAPREDUCE 把收集數(shù)據(jù)進行清洗
第35節(jié)電視采集項目流程篇之清洗數(shù)據(jù)綁定到hive表中(上)
第36節(jié)電視采集項目流程篇之清洗數(shù)據(jù)綁定到hive表中(下)
第37節(jié)電視采集項目流程篇之根據(jù)hive綁定數(shù)據(jù)統(tǒng)計計算保存到hive表中
第38節(jié)電視采集項目流程篇之把hive表中數(shù)據(jù)導入到mysql中
第39節(jié)電視采集項目流程篇之安裝php環(huán)境并且快速熟悉php語法
第40節(jié)電視采集項目流程篇之安裝php和echarts進行結(jié)合展示圖表
第41節(jié)電視采集項目流程篇之Azkaban調(diào)度腳本的編寫
第42節(jié)電視采集項目流程篇之Azkaban流程調(diào)度演示,最終在php頁面展示
第43節(jié)hadoop和hive項目怎么平滑的轉(zhuǎn)到spark上面介紹
第44節(jié)Spark介紹和整體架構(gòu)
第45節(jié)Spark歷史和特點
第46節(jié)Spark下載源碼和安裝和使用
第47節(jié)Spark創(chuàng)建RDD集合
第48節(jié)Spark中transformation的介紹
第49節(jié)Spark中action的介紹
第50節(jié)Spark SQL發(fā)展史
第51節(jié)HiveContext
第52節(jié)Spark SQL和DataFrame
第53節(jié)電視采集項目流程如何把hadoop項目平滑過渡到spark項目上
第54節(jié)電視采集項目流程spark篇通過sparksql處理業(yè)務邏輯上
第55節(jié)電視采集項目流程spark篇通過sparksql處理業(yè)務邏輯下
第56節(jié)電視采集項目流程spark篇通過Azkaban調(diào)度spark
第57節(jié)項目總體總結(jié)
第58節(jié)簡歷指導