投稿

Hadoop大数据入门课程2019

4258

32

2019-12-21 17:48:55

未经作者授权，禁止转载

链接：https://pan.baidu.com/s/1IcipwNjDDJqYWXvjatKumw 提取码：27gx

我的学习日记

大数据攻城狮发消息

同行都在偷偷用的动画制作神器，今天免费开放体验

6万人感兴趣

01-大数据入门课程内容介绍

12:15

02-大数据的概念和特点

21:21

03-大数据应用场景和发展前景

25:00

04-大数据部门业务分析和组织结构

14:30

05-Hadoop是什么

17:15

06-Hadoop的组成

04:16

07-HDFS的组成

04:50

08-Yarn的组成

09:44

09-MapReduce的两个阶段

02:56

10-大数据技术生态

13:03

11-搭建Hadoop环境准备虚拟机

18:23

12-搭建Hadoop环境安装JDK

06:03

13-搭建Hadoop环境安装Hadoop

04:07

14-Hadoop的目录结构

06:51

15-Hadoop运行模式本地模式 grep

23:14

16-Hadoop运行模式本地模式 wordcount

07:36

17-Hadoop伪分布式模式

20:09

18-hadoop伪分布式模式运行wordcount

10:31

19-hadoop伪分布模式在yarn上跑mr

16:12

20-回顾

19:42

21-NameNode格式化问题

12:49

22-配置历史服务器

10:47

23-日志的聚集功能

13:41

24-配置文件的说明

06:37

25-完全分布式模式准备3台虚拟机

18:06

26-安全拷贝 scp

17:36

27-远程同步技术 rsync

05:05

28-集群文件分发脚本

22:24

29-完全分布式模式集群的配置

17:17

30-完全分布式模式单点启动集群

14:21

31-SSH免密登录配置

17:34

32-集群的群起

09:37

33-自定义jps脚本

04:42

34-集群时间同步

16:27

35-day02回顾

25:33

36-HDFS的产出背景和优缺点

24:43

37-HDFS组成架构

07:13

38-HDFS的文件块大小

22:38

39-HDFS客户端操作 Shell

29:38

40-HDFS Java客户端操作搭建环境

10:39

41-HDFS Java客户端操作获取FileSystem对象

14:19

42-HDFS java客户端操作文件上传

12:06

43-HDFS java客户端操作配置文件的优先级

09:29

44-HDFS java客户端操作文件下载

05:57

45-HDFS java客户端操作文件和目录的删除

04:01

46-HDFS java客户端操作文件和目录的更名

02:58

47-HDFS java客户端操作文件详情

08:01

48-HDFS java客户端操作判断文件还是目录

21:39

49-HDFS java客户端操作 IO流上传下载

13:20

50-HDFS java客户端操作定位读取文件

13:26

51-day03回顾

21:42

52-HDFS 写数据流程

18:55

53-节点距离的计算

05:58

54-副本存储节点选择

04:00

55-HDFS 读数据流程

05:00

56-NN和2NN的工作机制

16:31

57-镜像文件和编辑日志

17:11

58-checkPoint

03:16

59-Namenode故障处理

19:50

60-安全模式

12:47

61-NameNode多目录配置

10:10

62-DataNode工作机制

07:59

63-数据完整性

08:07

64-掉线时限参数设置

03:12

65-服役新节点

19:52

66-退役旧节点白名单

09:10

67-退役旧节点黑名单

07:52

68-Datanode多目录配置

13:51

69-DataNode多目录问题演示

06:58

70-Hadoop2.x新特性进群数据拷贝小文件归档

16:39

71-day04回顾

24:29

72-MapReduce的定义和特点

16:49

73-MapReduce的核心编程思想

14:09

74-MapReduce的三大类进程

02:22

75-Hadoop的常用数据类型

09:13

76-MapReduce编程规范

09:36

77-WordCount需求分析

04:17

78-WordCount Mapper

17:00

79-WordCount Reducer

06:27

80-WordCount Driver

13:01

81-WordCount Debug调试

11:32

82-Hadoop序列化

24:05

83-序列化案例需求分析

06:34

84-序列化案例自定义Bean对象实现序列化接口

05:37

85-序列化案例 Mapper

07:40

86-序列化案例 Reducer

05:52

87-序列化案例 Driver

08:39

88-在集群上运行MR程序

10:07

89-Job提交之前的准备工作

42:42

90-day05回顾

32:12

91-切片与MapTask并行度决定机制

13:25

92-切片源码分析

32:21

93-InputFormat

08:47

94-CombineTextInputFormat

27:15

95-KeyValueTextInputFormat

19:08

96-NLineInputFormat

19:31

97-自定义InputFormat需求分析

10:10

98-自定义InputFormat SmallFileInputFormat

10:27

99-自定义InputFormat SmallFileRecordReader

27:10

100-自定义InputFormat 测试

12:14

101-day06回顾

12:52

102-Shuffle机制介绍

37:28

103-Partitioner分区

18:19

104-自定义分区器

12:37

105-使用分区需要注意的情况

05:11

106-排序简介

06:01

107-全局排序

16:23

108-自定义排序全局排序区内排序

06:07

109-Combiner

20:24

110-分组比较器

10:58

111-分组案例按照价格排序

18:33

112-分组案例分组比较器

29:51

113-Shuffle准备工作

33:23

114-Shuffle 收集排序溢写合并

36:44

115-day07回顾

16:48

116-OutputFormat

07:04

117-自定义OutputFormat

16:51

118-自定义OutputFormat 测试

08:43

119-MapTask的工作机制

28:09

120-ReduceTask的工作机制

10:43

121-ReduceJoin 简介

08:38

122-ReduceJoin OrderBean

05:01

123-ReduceJoin Mapper

13:14

124-ReduceJoin Reducer

11:12

125-ReduceJoin 测试

10:38

126-MapJoin

33:34

127-计数器

04:22

128-ETL数据清洗

12:05

129-MapReduce总结

10:38

130-MapReduce扩展案例

26:57

131-MapReduce扩展案例 TopN

29:03

132-day08回顾

11:38

133-压缩简介

08:00

134-Hadoop支持的压缩方式

14:52

135-各个压缩方式的特点

08:25

136-压缩位置的选择和压缩相关的参数

06:57

137-在MR程序中体会压缩

11:00

138-数据流的压缩

14:57

139-数据流的解压缩

06:31

140-Yarn介绍

06:34

141-Yarn的工作机制

10:17

142-FIFO调度器

17:53

143-容量调度器 avi

16:19

144-公平调度器

25:51

145-多队列配置

16:27

146-任务的推测执行

13:13

147-负载均衡

09:30

148-MR优化手段

23:14

149-常用的调优参数

17:17

150-JVM重用

03:57

顶部