• 投稿

小牛大数据-06-spark安装部署到高级-10天

1684
3
2020-02-07 10:45:48
未经作者授权，禁止转载
12
投币
43
6
小牛大数据-06-spark安装部署到高级-10天 1-08天的内容 后续在另一个视频中 链接:https://pan.baidu.com/s/1nWIgBNGk77GAJHVof0Tpyw 密码:s7wi 链接失效，请联系本人，在下面评论即可。 寻找不易，@@@@@@@@@点赞@@@@@@@@收藏@@@@@@@@@@投币
视频教程
编程
小牛大数据
sparkcore
kafka+sparkstreaming
大数据
spark
sparksql
sparkstreaming
RDD
chong__zi 发消息
精致的生活，更要精致的学习ing, 分享资源，编程，生活，网球，感悟
豆包-会思考的AI助手,轻松应对复杂需求,立即体验!
豆包
视频选集
（70/97）
01Spark简介
22:51
02spark安装包下载
12:44
03spark集群安装-1
06:03
04spark集群安装-2
31:25
05spark高可用集群安装-1
08:59
06spark高可用集群安装-2
30:53
07提交第一个spark程序
28:12
08spark shell运行wordcount
35:06
09spark任务执行流程简介
21:32
10Yarn和spark的对比
09:44
11在idea中用scala编写WordCount
31:29
12在idea中用java编写WordCount
23:11
13在idea中用java lambda编写WordCount
12:03
14本地调试spark程序
08:20
01RDD简介
39:28
02RDD介绍
13:39
03创建RDD的方式
19:40
04RDD的Transformation-1
17:23
05RDD的Transformation-2
25:56
06RDD的分区数量
26:56
07HDFS读取数据分区的数量
31:05
08mapParitionWithIndex
34:35
09RDD的aggregate方法
19:50
10RDD的AggregateByKey方法
17:53
11collect方法执行过程说明
20:44
12foldByKey方法
13:04
13foreach和foreachPartition
20:35
14作业和总结
18:22
01RDD复习
30:29
02CombineByKey方法
59:41
03最受欢迎老师
23:52
04每个学科最受欢迎老师TopN-1
44:09
05每个学科最受欢迎老师TopN-2（过滤多次提交）
33:16
06每个学科最受欢迎老师TopN-3（自定义分区器）
41:12
07每个学科最受欢迎老师TopN-1（减少shuffle）
18:02
08WordCount执行过程详解-1
49:09
09WordCount执行过程详解-2
24:23
01回顾
24:27
02RDD的cache
31:01
03cache部分数据
10:18
04cache的补充说明
38:56
05RDD的checkpoint机制
27:13
06根据ip计算归属地的需求
17:46
07单机程序计算ip归属地
27:01
08广播变量
25:53
09广播变量的使用
06:58
10根据IP地址计算归属地实现-1
33:03
11根据IP地址计算归属地实现-2
20:23
12将数据写入到MySQL中
28:22
01内容回顾
15:13
02自定义排序-1
23:15
03自定义排序-2
16:08
04自定义排序-3
05:57
05自定义排序-4
08:01
06自定义排序-5
09:36
07JDBC RDD
26:31
08JDBC RDD使用注意事项
12:00
09Spark执行过程简介
12:46
10构建DAG
18:06
11切分Stage过程-1
25:26
12切分Stage过程-2
20:24
13切分Stage过程-3
19:24
14切分Stage过程-4
32:18
15线程池介绍
25:46
16序列化复习
15:49
17Spark整体执行流程
29:11
18SparkCore阶段总结
12:16
01复习
11:02
02复习
08:40
03序列化问题
23:55
04函数中引用一个Driver端的一个类的实例
26:04
05函数中引用一个Driver端的一个objec1
14:06
06在EXecutor中初始化一个object
23:33
07一个Executor中多个Task的多线程问题
29:09
08spark SQL简介~1
23:23
08spark SQL简介~2
23:23
09sparkSQL1.x案例-1~1
46:03
10sparkSQL1.x案例-2
15:00
11sparkSQL1.x案例-3
09:53
12sparkSQL2.x案例-1
14:11
13spark2.x的sql方式的wordcount
18:10
14spark2.x DataSet方式的api
09:22
01复习-01
28:10
02复习-02
16:08
03spark sql的join
26:32
04dataframe的join
02:31
06用SQL根据IP地址计算归属地
17:37
07使用广播变量实现mapsidejoin
28:35
08几何平均数说明
25:16
09自定义聚合函数
36:25
10Dataset介绍
42:17
11spark2.0的特性
24:37
12sparkSQL的JDBC数据源
20:17
13写入多种文件格式
14:39
14json数据源
08:37
15csv数据源
03:34
16parquet数据源
13:09

爆肝30天！我做了一款《跳跳史莱姆》游戏！！
点击体验>>

小牛大数据-09-项目实战-9天
chong__zi
805 5

北风大数据数据分析与挖掘高级工程师第三期 1、Level Ⅰ业务数据分析师
chong__zi
3805 1

阿里巴巴数据治理实践
chong__zi
6850 5

小牛大数据-07-Scala基础到高级-5天
chong__zi
1027 0

小牛大数据10-Ambari+HDP搭建-1天
chong__zi
1262 0

小牛大数据-08-共享单车项目8天
chong__zi
1621 0

美团大数据安全实践
chong__zi
2229 4

第一章 玩转大数据：深入浅出大数据挖掘技术(Apriori算法、Tanagra工具、决策树)priori 算法、 Tanagra 工具、决策树)1-9
chong__zi
6547 2

业务与数据融合的企业架构设计-20220408
chong__zi
3461 0

智能平台演示
chong__zi
1139 0

小牛大数据-05-ElasticSearch-2天
chong__zi
1168 1

徐培成大数据-day11-01.sparkSQL
chong__zi
542 0

小牛大数据-03-linux基础进阶（开发人员必备）3天
chong__zi
541 0

3、读DMBOK2数据管理知识指南有感-王建峰
chong__zi
1293 1

美团指标数据治理时间-美团
chong__zi
606 0

1、推动数据资产的服务化助理企业数字化转型-辜敏
chong__zi
605 0

徐培成大数据-11-大数据JavaWeb基础SSM
chong__zi
1972 4
慢一点，也会抵达
客服
顶部
赛事库 课堂 2021拜年纪