干货｜字节跳动基于Apache Atlas的近实时消息同步能力优化
出处：
mp.weixin.qq.com
作者：
开发套件团队
字节数据中台DataLeap的Data Catalog系统通过接收MQ中的近实时消息来同步部分元数据。Apache Atlas对于实时消息的消费处理不满足性能要求，内部使用Flink任务的处理方案在ToB场景中也存在诸多限制，所以团队自研了轻量级异步消息处理框架，支持了字节内部和火山引擎上同步元数据的诉求。本文定义了需求场景，并详细介绍框架的设计与实现。
查看原文
70
技术
lddgo
分享于
2022-10-11
