投稿

Spark深入浅出第一部分

582

0

2018-03-24 23:15:45

www.itcast.cn Spark深入浅出第一部分

公开课线上课程

有意思的小弟弟发消息

8月空降上海奏响维京传奇！

6万人感兴趣

001_Spark的前世今生

01:06:25

002_课程介绍特色与价值

47:41

003_1Scala编程详解基础语法

28:30

003_2Scala编程详解基础语法

05:57

004_Scala编程详解条件控制与循环

49:43

005_Scala编程详解函数入门

19:51

006_Scala编程详解函数入门之默认参数和带名参数

11:04

007_Scala编程详解函数入门之变长参数

10:58

008_Scala编程详解函数入门之过程lazy值和异常

16:14

009_1Scala编程详解数组操作之Array、ArrayBuffer以及遍历数组

25:12

009_2Scala编程详解数组操作之Array、ArrayBuffer以及遍历数组

03:07

010_Scala编程详解数组操作之数组转换

22:23

011_Scala编程详解Map与Tuple

32:14

012_Scala编程详解面向对象编程之类

52:36

013_Scala编程详解面向对象编程之对象

34:49

014_Scala编程详解面向对象编程之继承

47:34

015_Scala编程详解面向对象编程之Trait

52:32

016_Scala编程详解函数式编程

45:07

017_Scala编程详解函数式编程之集合操作

52:50

018_Scala编程详解模式匹配

54:52

019_Scala编程详解类型参数

01:00:40

020_Scala编程详解隐式转换与隐式参数

31:25

021_Scala编程详解Actor入门

26:02

022_课程环境搭建CentOS65集群搭建

59:52

023_课程环境搭建Hadoop241集群搭建

16:56

024_课程环境搭建Hive013搭建

12:49

025_课程环境搭建ZooKeeper345集群搭建

09:26

026_课程环境搭建kafka_292-081集群搭建

15:09

027_课程环境搭建Spark130集群搭建

15:49

028_Spark核心编程Spark基本工作原理与RDD

45:42

029_1使用Java开发本地测试的wordcount程序

41:15

029_2将java开发的wordcount程序提交到spark集群上运行

13:36

029_3使用scala开发wordcount程序

11:28

029_4使用spark-shell开发wordcount程序

04:17

029_5SparkUI补充说明

01:14

029_6spark-submit中的--master选项的补充说明(重要，必看!)

04:53

030_Spark核心编程wordcount程序原理深度剖析

25:57

031_Spark核心编程Spark架构原理

23:17

032_Spark核心编程创建RDD(集合本地文件、HDFS文件)

44:49

033_1transformation和action讲解与原理剖析

21:15

033_2案例统计每行出现的次数(操作key-value对)

13:47

033_3常用transformation和action操作概览

04:22

034_1map案例实战将集合中的数字乘以2

14:17

034_2filter案例实战过滤集合中的偶数

08:52

034_3flatMap案例实战将文本行拆分为单词

08:52

034_4groupByKey案例实战将每个班级的成绩进行分组

14:21

034_5reduceByKey案例实战统计每个班级的总分

09:13

034_6sortByKey案例实战按照学生成绩进行排序

08:10

034_7join和cogroup案例实战打印学生成绩

19:50

035_Spark核心编程action操作开发实战

33:24

036_Spark核心编程RDD持久化详解

34:21

037_Spark核心编程共享变量(BroadcastVariable和Accumulator)

29:31

038_Spark核心编程高级编程之基于排序机制的wordcount程序

18:00

039_1使用Java实现二次排序

14:19

039_2使用Scala实现二次排序

04:26

040_1获取文本内最大的前3个数字

10:14

040_2获取每个班级排名前3的成绩(分组取topn)

15:48

041_Spark内核源码深度剖析Spark内核架构深度剖析

39:35

042_Spark内核源码深度剖析宽依赖与窄依赖深度剖析

18:46

043_1Spark内核源码深度剖析基于Yarn的两种提交模式深度剖析

19:44

043_2基于yarn的提交模式的spark-envsh配置补充

02:20

044_1SparkContext原理剖析

15:19

044_2SparkContext源码分析

28:01

045_Spark内核源码深度剖析Master主备切换机制原理剖析与源码分析

25:22

046_Spark内核源码深度剖析Master注册机制原理剖析与源码分析

21:32

047_Spark内核源码深度剖析Master状态改变处理机制原理剖析与源码分析

08:37

048_Spark内核源码深度剖析Master资源调度算法原理剖析与源码分析

39:26

049_Spark内核源码深度剖析Worker原理剖析与源码分析

43:39

050_Spark内核源码深度剖析job触发流程原理剖析与源码分析

20:41

051_1stage划分算法原理剖析

27:02

051_2DAGScheduler源码分析(stage划分算法、task最佳位置计算算法)

33:59

052_Spark内核源码深度剖析TaskScheduler原理剖析与源码分析

31:35

053_Spark内核源码深度剖析Executor原理剖析与源码分析

16:44

054_1Task原理剖析

12:28

054_2Task源码分析

38:12

055_1普通Shuffle操作的原理剖析

27:49

055_2优化后的Shuffle操作的原理剖析

12:13

055_3Shuffle读写源码分析

32:35

056_BlockManager原理剖析(1)

16:55

056_BlockManager源码分析(2)

57:32

057_CacheManager原理剖析(1)

10:07

057_CacheManager源码分析(2)

16:13

058_Spark内核源码深度剖析Checkpoint原理剖析

33:37

059_Spark性能优化性能优化概览

27:56

060_Spark性能优化诊断内存的消耗

09:23

061_Spark性能优化高性能序列化类库

18:23

062_Spark性能优化优化数据结构

10:46

063_Spark性能优化对多次使用的RDD进行持久化或Checkpoint

09:43

064_Spark性能优化使用序列化的持久化级别

03:44

065_Spark性能优化Java虚拟机垃圾回收调优

37:26

066_Spark性能优化提高并行度

09:42

067_Spark性能优化广播共享数据

07:28

068_Spark性能优化数据本地化

14:49

069_Spark性能优化reduceByKey和groupByKey

16:29

070_Spark性能优化shuffle性能优化

21:01

071_1Spark130升级151的原因说明

10:42

071_2Spark14x和15x版本的新特性

05:20

071_3Spark151源码编译

09:13

071_4Spark151集群搭建

13:06

072_SparkSQL前世今生

09:56

顶部