叩丁狼官方微信公眾號| 新浪微博|
咨詢熱線:020-85628002
首頁 > 在線課程
大數據基礎入門精品課
累計學習:132人 講師:賀圣軍
¥0.00
基礎入門 課程共99課時
本套課程專門針對有一定Java基礎的同學
2023-11-01 過期
課程介紹

本套課程由叩丁狼教育資深講師賀圣軍老師特意錄制,專門針對有一定Java基礎的同學,是特別適合在線學習的大數據視頻,是你沒看過的全新版本。 課程中,賀老師將帶領大家學習海量大數據的使用與分析處理,并熟練掌握常見大數據工具的使用。


課程大綱

第一天

01_內容概述

02_日志采集流程

03_分布式文件系統的寫數據流程

04_分布式文件系統的讀數據的流程

05_分布式文件系統的核心設計

06_centos6安裝

07_centos6和centos7的區別

08_Centos6的初始化設置

09_NAT網絡模式

10_ssh的配置和原理

11_hadoop安裝前步驟

12_hadoop的集群環境搭建

13_hadoop的集群環境的常見問題

14_hadoop的三臺服務器的配置

15_hadoop的客戶端的理解和核心參數


第二天

01_HDFS客戶端操作

02_Linux的Hadoop的glibc的依賴問題

03_Java客戶端的文件操作

04_Java客戶端的文件操作2

05_Java通過流的方式操作文件

06_Java通過流的方式指定位置的讀取

07_Java版本的單詞統計

08_分布式的單詞統計的設計思想

09_分布式單詞統計的思路實現1

10_分布式單詞統計的思路實現2

11_分布式單詞統計的實現思路_Mapper運算

12_分布式單詞統計的Reduce操作

13_分布式程序的打包運行

14_自定義腳本啟動hdfs集群

15_通過HDFS集群的腳本啟動hdfs


第三天

01_namenoded的補充

02_secondaryNameNode工作原理

03_hdfs文件操作的流程復習

04_分布式運算MapReduce的模型

05_分布式運算MapReduce的場景說明

06_分布式資源管理平臺概述

07_分布式資源管理Yarn程序的安裝

08_Wordcount單詞計數程序實現

09_Wordcount程序的打包運行

10_mr程序的運行方式

11_訂單的Topn運算_map

12__訂單的TopN的運算_Reduce

13_0213_MapReduce任務處理流程

14_今日小結


第四天

01_資源管理平臺的流程分析

02_線段重疊統計案例

03_電影評分topN

04_MapReduce的數據處理流程圖

05_MapReducer的電影評分升級版

06_自定義的key的數據處理需要注意的幾點

07_MapReduce的性能優化_避免創建垃圾對象

08_MapReduce的訂單和用戶的Join操作

09_MapReduce_案例_倒排索引

10_MapReduce的任務啟動運行流程


第五天

01_hive的工作原理

02_hive的基本概念和概述

03_mysql數據庫的安裝

04_hive的安裝

05_測試啟動運行

06_hive的DDL

07_分區表

08_Hive 的連接方式

09_Hive的數據類型_Array

10_Hive的數據類型_Map_Struct

11_常用函數

12_表生成函數_explode_json_tuple

13_分窗函數_topN模型

14_分窗函數_級聯求和

15_單詞統計_hive


第六天

01_大數據技術回顧_HBASE概述

02_HBASE分布式數據庫的設計原理

03_數據的存儲結構

04_zk的安裝

05_hbase的安裝配置

06_hbase的表數據模型

07_hbase客戶端操作

08_Hbase的重要特性_字典順序排序

09_HBase客戶端API操作_DML

10_HBase客戶端API操作_添加_獲取


第七天

01_日志采集流程分析

02_Flume工作的流程

03_Flume的安裝

04_Flume的案例_目錄采集

05_日志采集配置文件詳解

06_新增文件內容的采集

07_多級串聯的操作

08_Sqoop的安裝

09_Sqoop導入數據到HDFS

10_Sqoop的數據導出

11_總結分析



賀圣軍
高級講師

RocketMQ廣州社區聯合創始人,Java教學負責人,開源愛好者。以深入淺出的教學方式見長,講課幽默,富有親和力,憑借其體重和教學實力成為學員們心中當之無愧的“重量級人物”。

多次參與并設計過分布式的解決方案,保障商家的OMS系統,WMS管理系統在雙十一高效穩定的運行參與順豐快遞和菜鳥物流快遞的接口的設計和實現。

熱愛分享和交流,授課縱橫捭闔,擅于把企業技術融入教學,學生超過5000人,具有高并發、高吞吐的解決方案的架構和落地。

擅長Dubbo、SpringCloud、Redis、RocketMQ、KafKa、MySQL、SpringBoot等技術,在大數據領域對于Hadoop、Spark、Flink分布式的存儲和運算有一定的研究。


主講的其他課程:
相關課程:
查看更多
江苏e球彩胜负开奖结果