Data Mesh助力规模化企业数据应用
出处:
mp.weixin.qq.com
作者:
窦衍森
今天的文章从一个企业应用Data Mesh的故事开始: Daff是一家全球音乐流媒体公司,公司的愿景是:“在生活中的每一刻, 以身临其境的艺术体验, 连接全球的艺术家和听众”。在它的使命背后,是公司对数据、分析和人工智能寄予的厚望。 时间从三年前开始。当时Daff的数据收集、处理、分析和试验都由有限的数据团队成员承载,他们承受着巨大的压力。业务团队不信任数据,经由数据团队处理的数据经常出现各种各种显而易见的问题,比如,报表中不合理的数据,不知道如何使用的数据集。数据团队需要花费大量的时间和业务系统开发人员沟通数据的细节,理解数据,进而才能进行数据处理和加工,导致对于业务的响应不够迅速。 企业的数据目录基本成为摆设,数据消费方很难直接通过数据目录了解数据如何使用,不得不回归到线下渠道,然而不同团队往往有自己的事情,很难及时响应消费方的诉求。获取正确数据的准备时间和摩擦导致很难进行新的数据试验。领域本身对于维护数据的易于获得、可靠和可用没有任何责任和兴趣。