DeepFlow AutoTagging 10x 性能提升实战-第十四期云原生可观测性分享会-宋贞 DeepFlow 高级技术专家

634
0
2023-01-12 14:45:03
7
投币
5
7
演讲嘉宾 宋贞 DeepFlow 高级技术专家 2012年加入云杉,从云平台、SDN网络到云原生可观测性平台,对云基础设施和云原生应用系统有深厚的知识沉淀和实战经验,目前主要负责DeepFlow Server端的关键技术研究与开发。 演讲主题 《DeepFlow AutoTagging 10x 性能提升实战》 为了探究云原生应用系统的内部状态,我们希望向观测数据中注入尽量丰富的标签,这些标签以往通过开发人员手动在代码中注入,或通过配置 Promtheus、OpenTelemetry 实现,一方面造成了很大的工作量和资源开销,另一方面也导致不同信号源的数据标签不一致形成数据孤岛。 DeepFlow 依靠 AutoTagging 机制可以为所有观测信号统一注入标准的、丰富的标签,很好的解决了这些问题。本次直播将会为大家解密支撑 AutoTagging 高性能的关键机制 SmartEncoding。通过对标签数据的分离编码和查询时关联,我们将存储开销降低了 10~50 倍,并且能支持无限量的 K8s label/annotation 等信息作为业务自定义标签。通过 deepflow-server 提供的 SQL API,这些编码和关联机制对使用者完全透明,就像在一张大宽表上直接查询。 演讲提纲 l AutoTagging:为所有观测信号统一注入标准的、丰富的云基础设施及云原生应用标签 l SmartEncoding 分离编码:通过提前编码降低标签写入的资源消耗 l SmartEncoding 查询关联:为所有观测信号注入无限量的自定义标签 l 存储和查询观测数据中已有的(开发自定义、Prometheus、OpenTelemetry)标签 l 后续迭代计划:支持更丰富的自定义标签、支持通过 OTLP 协议 Export 数据 听众收获 l DeepFlow AutoTagging 和 SmartEncoding 的实现方法 l 如何 10x 降低可观测性数据平台的资源成本
技术创造价值
1.7万播放
简介
第一期|IT系统为什么需要可观测性
40:42
第二期|开启愉悦时刻!DeepFlow可观测性方案实践及开放合作-云杉网络COO来源
01:15:50
第三期|构建统一的云原生应用可观测性数据平台-云杉网络 研发VP向阳
55:19
第四期|星火燎原-DeepFlow漫谈之技术、场景、方案-云杉网络售前经理冀佳鹏
48:06
第五期|MetaFlow:开源的高度自动化可观测性平台-云杉网络 研发VP向阳
55:06
第六期|5GC和电信云构建云网络可观测性的必要性
45:28
第七期|高清云网可观测之全链路追踪实战
38:11
第八期|DeepFlow:开启高度自动化的可观测性新时代
39:56
第九期 | DeepFlow AutoLogging:自动采集应用调用日志和流日志
38:59
第十期|DeepFlow在 Kube-OVN 环境的可观测实践
40:06
第十一期|论元数据在可观测性中的重要性
23:29
第十二期|证券行业云原生架构及可观测性探索之路
12:56
第十三期|DeepFlow Grafana 插件开发实践
30:40
第十四期|DeepFlow AutoTagging 10x 性能提升实战
28:58
第十五期|使用 eBPF 零成本落地分布式追踪
44:44
第十六期|开启 eBPF 可观测性之前你需要了解的那些事
40:55
第十七期|DeepFlow实战案例之快速定位应用性能瓶颈-李倩
31:29
第十八期|DeepFlow 在银行数字化转型中的可观测性实践
33:41
客服
顶部
赛事库 课堂 2021拜年纪