投稿

Hadoop教程，大数据hadoop3.x搭建到集群调优（MapReduce、YARN、HDFS）

251.8万

4.7万

2021-02-25 08:00:03

【配套资料】关注公众号：尚硅谷教育，回复“视频资料”免费获取【课程简介】Hadoop是大数据技术中重要的框架之一，是学习大数据重要的第一课，在Hadoop平台之上，可以更容易地开发和运行其他处理大规模数据的框架。尚硅谷Hadoop视频教程再次重磅升级！以企业实际生产环境为背景，增加了更全面、更细致、更硬核的生产调优手册，对源码解析部分进行了全新的扩充和升级，并增加大量企业实战案例！前置知识： Java基础、Maven基本操作、IDEA基本使用、Linux基础命令。

尚硅谷发消息

1V1简历|毕设|就业指导，加小谷姐姐秋：3276742687

01_尚硅谷_Hadoop_开篇_课程整体介绍

08:38

02_尚硅谷_Hadoop_概论_大数据的概念

04:34

03_尚硅谷_Hadoop_概论_大数据的特点

07:23

04_尚硅谷_Hadoop_概论_大数据的应用场景

09:58

05_尚硅谷_Hadoop_概论_大数据的发展场景

08:17

06_尚硅谷_Hadoop_概论_未来工作内容

06:25

07_尚硅谷_Hadoop_入门_课程介绍

07:29

08_尚硅谷_Hadoop_入门_Hadoop是什么

03:00

09_尚硅谷_Hadoop_入门_Hadoop发展历史

05:52

10_尚硅谷_Hadoop_入门_Hadoop三大发行版本

05:59

11_尚硅谷_Hadoop_入门_Hadoop优势

03:52

12_尚硅谷_Hadoop_入门_Hadoop1.x2.x3.x区别

03:00

13_尚硅谷_Hadoop_入门_HDFS概述

06:26

14_尚硅谷_Hadoop_入门_YARN概述

06:35

15_尚硅谷_Hadoop_入门_MapReduce概述

01:55

16_尚硅谷_Hadoop_入门_HDFS&YARN&MR关系

03:22

17_尚硅谷_Hadoop_入门_大数据技术生态体系

09:17

18_尚硅谷_Hadoop_入门_VMware安装

04:41

19_尚硅谷_Hadoop_入门_Centos7.5软硬件安装

15:56

20_尚硅谷_Hadoop_入门_IP和主机名称配置

10:50

21_尚硅谷_Hadoop_入门_Xshell远程访问工具

09:05

22_尚硅谷_Hadoop_入门_模板虚拟机准备完成

12:25

23_尚硅谷_Hadoop_入门_克隆三台虚拟机

15:01

24_尚硅谷_Hadoop_入门_JDK安装

07:02

25_尚硅谷_Hadoop_入门_Hadoop安装

07:20

26_尚硅谷_Hadoop_入门_本地运行模式

11:56

27_尚硅谷_Hadoop_入门_scp&rsync命令讲解

15:01

28_尚硅谷_Hadoop_入门_xsync分发脚本

18:14

29_尚硅谷_Hadoop_入门_ssh免密登录

11:25

30_尚硅谷_Hadoop_入门_集群配置

13:24

31_尚硅谷_Hadoop_入门_群起集群并测试

16:52

32_尚硅谷_Hadoop_入门_集群崩溃处理办法

08:10

33_尚硅谷_Hadoop_入门_历史服务器配置

05:26

34_尚硅谷_Hadoop_入门_日志聚集功能配置

05:42

35_尚硅谷_Hadoop_入门_两个常用脚本

09:18

36_尚硅谷_Hadoop_入门_两道面试题

04:15

37_尚硅谷_Hadoop_入门_集群时间同步

11:27

38_尚硅谷_Hadoop_入门_常见问题总结

10:57

39_尚硅谷_Hadoop_HDFS_课程介绍

04:23

40_尚硅谷_Hadoop_HDFS_产生背景和定义

04:11

41_尚硅谷_Hadoop_HDFS_优缺点

05:28

42_尚硅谷_Hadoop_HDFS_组成

09:09

43_尚硅谷_Hadoop_HDFS_文件块大小

08:01

44_尚硅谷_Hadoop_HDFS_Shell命令上传

09:48

45_尚硅谷_Hadoop_HDFS_Shell命令下载&直接操作

16:41

46_尚硅谷_Hadoop_HDFS_API环境准备

08:20

47_尚硅谷_Hadoop_HDFS_API创建文件夹

10:54

48_尚硅谷_Hadoop_HDFS_API上传

06:42

49_尚硅谷_Hadoop_HDFS_API参数的优先级

05:08

50_尚硅谷_Hadoop_HDFS_API文件下载

08:24

51_尚硅谷_Hadoop_HDFS_API文件删除

04:12

52_尚硅谷_Hadoop_HDFS_API文件更名和移动

05:03

53_尚硅谷_Hadoop_HDFS_API文件详情查看

07:57

54_尚硅谷_Hadoop_HDFS_API文件和文件夹判断

03:20

55_尚硅谷_Hadoop_HDFS_写数据流程

11:38

56_尚硅谷_Hadoop_HDFS_节点距离计算

04:31

57_尚硅谷_Hadoop_HDFS_机架感知（副本存储节点选择）

06:07

58_尚硅谷_Hadoop_HDFS_读数据流程

05:04

59_尚硅谷_Hadoop_HDFS_NN和2NN工作机制

13:28

60_尚硅谷_Hadoop_HDFS_FsImage镜像文件

09:33

61_尚硅谷_Hadoop_HDFS_Edits编辑日志

04:49

62_尚硅谷_Hadoop_HDFS_检查点时间设置

02:34

63_尚硅谷_Hadoop_HDFS_DN工作机制

07:36

64_尚硅谷_Hadoop_HDFS_数据完整性

07:07

65_尚硅谷_Hadoop_HDFS_掉线时限参数设置

04:44

66_尚硅谷_Hadoop_HDFS_总结

03:44

67_尚硅谷_Hadoop_MapReduce_课程介绍

04:23

68_尚硅谷_Hadoop_MapReduce_概述&优点缺点

10:00

69_尚硅谷_Hadoop_MapReduce_核心思想

09:42

70_尚硅谷_Hadoop_MapReduce_官方WC源码&序列化类型

07:08

71_尚硅谷_Hadoop_MapReduce_编程规范

07:09

72_尚硅谷_Hadoop_MapReduce_WordCount案例需求分析

06:56

73_尚硅谷_Hadoop_MapReduce_WordCount案例环境准备

04:11

74_尚硅谷_Hadoop_MapReduce_WordCount案例Mapper

14:14

75_尚硅谷_Hadoop_MapReduce_WordCount案例Reducer

08:46

76_尚硅谷_Hadoop_MapReduce_WordCount案例Driver

10:59

77_尚硅谷_Hadoop_MapReduce_WordCount案例Debug调试

15:22

78_尚硅谷_Hadoop_MapReduce_WordCount案例集群运行

12:42

79_尚硅谷_Hadoop_MapReduce_序列化概述

06:30

80_尚硅谷_Hadoop_MapReduce_自定义序列化步骤

08:19

81_尚硅谷_Hadoop_MapReduce_序列化案例需求分析

09:09

82_尚硅谷_Hadoop_MapReduce_序列化案例FlowBean

06:52

83_尚硅谷_Hadoop_MapReduce_序列化案例FlowMapper

09:00

84_尚硅谷_Hadoop_MapReduce_序列化案例FlowReducer

04:50

85_尚硅谷_Hadoop_MapReduce_序列化案例FlowDriver

06:21

86_尚硅谷_Hadoop_MapReduce_序列化案例debug调试

07:54

87_尚硅谷_Hadoop_MapReduce_切片机制与MapTask并行度决定机制

15:19

88_尚硅谷_Hadoop_MapReduce_Job提交流程

20:35

89_尚硅谷_Hadoop_MapReduce_切片源码

19:17

90_尚硅谷_Hadoop_MapReduce_切片源码总结

05:00

91_尚硅谷_Hadoop_MapReduce_FileInputFormat切片机制

03:14

92_尚硅谷_Hadoop_MapReduce_TextInputFormat

04:39

93_尚硅谷_Hadoop_MapReduce_CombineTextInputFormat

10:18

94_尚硅谷_Hadoop_MapReduce_MapReduce工作流程

16:43

95_尚硅谷_Hadoop_MapReduce_Shuffle机制

06:22

96_尚硅谷_Hadoop_MapReduce_默认HashPartitioner分区

12:50

97_尚硅谷_Hadoop_MapReduce_自定义分区案例

07:20

98_尚硅谷_Hadoop_MapReduce_分区数与Reduce个数的总结

07:21

99_尚硅谷_Hadoop_MapReduce_排序概述

14:14

100_尚硅谷_Hadoop_MapReduce_全排序案例

15:26

101_尚硅谷_Hadoop_MapReduce_二次排序案例

03:07

102_尚硅谷_Hadoop_MapReduce_区内排序案例

06:53

103_尚硅谷_Hadoop_MapReduce_Combiner概述

07:18

104_尚硅谷_Hadoop_MapReduce_Combiner案例

12:33

105_尚硅谷_Hadoop_MapReduce_outputformat概述

03:42

106_尚硅谷_Hadoop_MapReduce_自定义outputformat案例需求分析

04:22

107_尚硅谷_Hadoop_MapReduce_自定义outputformat案例mapper&reducer

04:33

108_尚硅谷_Hadoop_MapReduce_自定义outputformat案例执行

12:33

109_尚硅谷_Hadoop_MapReduce_MapTask工作机制

03:46

110_尚硅谷_Hadoop_MapReduce_ReduceTask工作机制&并行度

09:00

111_尚硅谷_Hadoop_MapReduce_MapTask源码

16:57

112_尚硅谷_Hadoop_MapReduce_ReduceTask源码

15:25

113_尚硅谷_Hadoop_MapReduce_ReduceJoin案例需求分析

09:22

114_尚硅谷_Hadoop_MapReduce_ReduceJoin案例TableBean

07:09

115_尚硅谷_Hadoop_MapReduce_ReduceJoin案例Mapper

12:34

116_尚硅谷_Hadoop_MapReduce_ReduceJoin案例完成

12:27

117_尚硅谷_Hadoop_MapReduce_ReduceJoin案例debug

04:15

118_尚硅谷_Hadoop_MapReduce_MapJoin案例需求分析

06:57

119_尚硅谷_Hadoop_MapReduce_MapJoin案例完成

13:11

120_尚硅谷_Hadoop_MapReduce_MapJoin案例debug

02:49

121_尚硅谷_Hadoop_MapReduce_ETL数据清洗案例

15:11

122_尚硅谷_Hadoop_MapReduce_MapReduce开发总结

10:51

123_尚硅谷_Hadoop_MapReduce_压缩概述

16:05

124_尚硅谷_Hadoop_MapReduce_压缩案例实操

10:22

125_尚硅谷_Hadoop_Yarn_课程介绍

05:20

126_尚硅谷_Hadoop_Yarn_基础架构

04:56

127_尚硅谷_Hadoop_Yarn_工作机制

06:43

128_尚硅谷_Hadoop_Yarn_全流程作业

03:36

129_尚硅谷_Hadoop_Yarn_FIFO调度器

04:18

130_尚硅谷_Hadoop_Yarn_容量调度器

10:24

131_尚硅谷_Hadoop_Yarn_公平调度器

19:25

132_尚硅谷_Hadoop_Yarn_常用命令

14:50

133_尚硅谷_Hadoop_Yarn_生产环境核心参数配置

10:26

134_尚硅谷_Hadoop_Yarn_Linux集群快照

04:15

135_尚硅谷_Hadoop_Yarn_生产环境核心参数配置案例

15:33

136_尚硅谷_Hadoop_Yarn_生产环境多队列创建&好处

05:43

137_尚硅谷_Hadoop_Yarn_容量调度器多队列案例

12:40

138_尚硅谷_Hadoop_Yarn_容量调度器任务优先级

06:52

139_尚硅谷_Hadoop_Yarn_公平调度器案例

15:06

140_尚硅谷_Hadoop_Yarn_Tool接口案例环境准备

05:12

141_尚硅谷_Hadoop_Yarn_Tool接口案例完成

19:16

142_尚硅谷_Hadoop_Yarn_课程总结

10:26

143_尚硅谷_Hadoop_生产调优手册_核心参数_NN内存配置

14:15

144_尚硅谷_Hadoop_生产调优手册_核心参数_NN心跳并发配置

03:12

145_尚硅谷_Hadoop_生产调优手册_核心参数_开启回收站

07:16

146_尚硅谷_Hadoop_生产调优手册_HDFS压测环境准备

05:55

147_尚硅谷_Hadoop_生产调优手册_HDFS读写压测

18:55

148_尚硅谷_Hadoop_生产调优手册_NN多目录配置

08:25

149_尚硅谷_Hadoop_生产调优手册_DN多目录及磁盘间数据均衡

08:42

150_尚硅谷_Hadoop_生产调优手册_添加白名单

10:02

151_尚硅谷_Hadoop_生产调优手册_服役新服务器

13:07

152_尚硅谷_Hadoop_生产调优手册_服务器间数据均衡

03:16

153_尚硅谷_Hadoop_生产调优手册_黑名单退役服务器

07:46

154_尚硅谷_Hadoop_生产调优手册_存储优化_5台服务器准备

11:21

155_尚硅谷_Hadoop_生产调优手册_存储优化_纠删码原理

08:16

156_尚硅谷_Hadoop_生产调优手册_存储优化_纠删码案例

10:42

157_尚硅谷_Hadoop_生产调优手册_存储优化_异构存储概述

08:36

158_尚硅谷_Hadoop_生产调优手册_存储优化_异构存储案例实操

17:40

159_尚硅谷_Hadoop_生产调优手册_NameNode故障处理

09:09

160_尚硅谷_Hadoop_生产调优手册_集群安全模式&磁盘修复

18:32

161_尚硅谷_Hadoop_生产调优手册_慢磁盘监控

09:19

162_尚硅谷_Hadoop_生产调优手册_小文件归档

08:11

163_尚硅谷_Hadoop_生产调优手册_集群数据迁移

03:18

164_尚硅谷_Hadoop_生产调优手册_MR跑的慢的原因

02:43

165_尚硅谷_Hadoop_生产调优手册_MR常用调优参数

12:27

166_尚硅谷_Hadoop_生产调优手册_MR数据倾斜问题

05:26

167_尚硅谷_Hadoop_生产调优手册_Yarn生产经验

01:18

168_尚硅谷_Hadoop_生产调优手册_HDFS小文件优化方法

10:15

169_尚硅谷_Hadoop_生产调优手册_MapReduce集群压测

02:54

170_尚硅谷_Hadoop_生产调优手册_企业开发场景案例

15:00

171_尚硅谷_Hadoop_源码解析_RPC通信原理解析

13:44

172_尚硅谷_Hadoop_源码解析_NameNode启动源码解析

21:37

173_尚硅谷_Hadoop_源码解析_DataNode启动源码解析

22:10

174_尚硅谷_Hadoop_源码解析_HDFS上传源码_整体介绍

07:39

175_尚硅谷_Hadoop_源码解析_HDFS上传源码_create

10:13

176_尚硅谷_Hadoop_源码解析_HDFS上传源码_write

23:02

177_尚硅谷_Hadoop_源码解析_Yarn源码解析

21:21

178_尚硅谷_Hadoop_源码解析_Hadoop源码编译

21:01

顶部