统一调度器:支持流计算、批处理与图计算 - Congbin Qiao|谯从彬

199
0
2025-10-26 19:45:00
5
投币
8
1
随着大数据领域对复杂关系图数据的分析和计算需求不断增长,金融风控、团伙发现等场景对实时图计算能力的需求也日益迫切,这要求大规模图计算引擎需同时具备低延迟和高吞吐能力。当前流批一体计算引擎是未来方向,但图计算的迭代特性与传统流批处理存在本质差异,围绕图迭代构建流-批-图一体化计算引擎是一大技术挑战。由蚂蚁集团图计算团队自主研发的GeaFlow是业界首个大规模分布式流式图计算引擎,支持超大规模图上的实时图计算、离线图计算以及在线探索分析。本次分享将介绍GeaFlow如何将执行作业拆分为流、批、图任务进行统一编排,构建高效的流-批-图一体化调度执行框架。 Congbin Qiao: 蚂蚁集团技术专家 Congbin Qiao 是蚂蚁集团的技术专家,专注于大数据、分布式计算和图计算领域。自2020年加入蚂蚁集团图计算团队以来,他深度参与了蚂蚁自研流式图计算引擎GeaFlow的核心研发工作,支撑业务场景中海量图数据的实时计算与分析。
Apache Local Community 北京本地社区
3479播放
简介
直面安全领域的挑战 - Craig Russell
24:07
决定软件初创公司成败的三大关键因素 - Rui Su|苏锐
31:43
从 Commits 到 Capital:用开源热情点燃创业之旅 - William Guo|郭炜
32:08
七年之痒:我的 Apache 故事 - Zili Chen|陈梓立
34:40
Apache 社区发展研究——基于中国开源年度报告的数据分析 - Wei Wang|王伟
21:39
热潮退去后,如何维持开源项目继续运作 - Quincy Larson
15:31
中国传统文化与开源精神的交融 - Qigang Zhu|朱其罡
16:19
AI 时代的产品开发:变革与坚守 - Emily Chen|陈阳、Richard Bian|边思康
27:58
统一调度器:支持流计算、批处理与图计算 - Congbin Qiao|谯从彬
04:57
社区的力量 - Willem Jiang|姜宁
12:59
AI Agent:开启现实世界 AI 应用的金钥匙 - Jingyu Wang|王晶昱
14:04
以 GenAI 赋能开源生态,激发开发者创新浪潮 - Yubin Zheng|郑予彬
19:01
TRAE:真正的 AI 工程师 - Tao Wang|王涛
14:43
AI 重构开发:从工具革命到开发者进化论 圆桌7.25
50:58
独立开发者的黄金时代 - 圆桌7.26
46:45
圆桌:出海技术产品的用户增长及商业化路径
55:07
客服
顶部
赛事库 课堂 2021拜年纪