数据网格101:领域驱动的所有权和Collibra数据办公室新万博移动客户端

最近,我们的数据办公室主任JayMilitscher发布了一个非常有用的概述数据网格.虽然数据网格的四个支柱是不可分割地联系在一起的,但本文将重点讨论第一个支柱:域驱动的所有权。

专家控制生态系统的地方

数据网格框架具有社会性和技术性。本文假设使用遗留架构管理分析工作负载的主要挑战之一是知识。将领域专家重新定位于数据生态系统的中心,而不是集中的数据源,这是数据网格的首要原则。

数据网格四原则

  • 域驱动的所有权
  • 作为产品的数据
  • 自助式数据基础设施
  • 联邦计算治理

领域驱动的所有权认识到,营销人员了解营销,销售人员了解销售,而用于促进分析的集中化是低效的。当组织将所有内容都输入到一个中央数据湖时,它将数据与主题专家分离,这会降低工作效率。创新放缓。组织变得停滞不前。

Collibra联合创始人斯坦•克里斯蒂安斯(Stijn“Stan”Christiaens)提到:“我们看到了数据仓库的发展、大数据平台的集群化、数据湖的流媒体化,所有这些都在云计算中迅速商品化。”新万博移动客户端无论技术多么先进,始终存在的障碍是企业所有权。1

因此,数据网格的第一个支柱是让领域专家负责他们的数据生态系统。在数据网格模型中,领域专家不仅控制数据生态系统,他们还擅长利用数据。因为他们知道上下文和业务优先级,所以他们负责清理、丰富数据,并使整个组织的数据消费者可以随时使用数据。

从业务的角度来看(分散所有权)使事情变得更容易,因为它更接近于您的业务的实际结构。域可以从业务的一端遵循到另一端。每个团队都对他们的数据负责,并且他们的流程可以在不影响其他团队的情况下进行扩展。

——詹姆斯·塞拉“数据网格:集中所有权vs分散所有权

这些域所有者建立和维护数据的质量,并提供必要的事实和文档。集中式数据办公室不再承担这个任务。通过将数据与业务人才结合起来,这消除了摩擦,简化了洞察时间。

然而,领域驱动的所有权只是四支柱框架的第一个支柱。组织演变的动态对每个公司来说都是独一无二的。事实上,我们在Collibra的经历是一个有趣的数据网新万博移动客户端格组织演变的案例研究。

新万博移动客户端领域驱动的所有权是我们的核心

即使在Zhamak Dehghani在2019年创造“数据网格”一词之前,我们的联合创始人Stijn“Stan”Christiaens和Felix Van de Maele就赞同了一种看起来很像数据网格的组织战略,特别是在涉及领域驱动的所有权时。

在Co新万博移动客户端llibra,建立内部企业分析的方法是在业务部门内部配备数据分析师,而不是作为一个集中的团队。这在很长一段时间里都是一个指导原则。销售分析的人坐在销售部。市场分析的人坐在市场营销部。等等。

然而,很明显,没有其他三个数据网格支柱的领域驱动所有权是无法扩展的,我们认为这是评估数据网格的关键指标之一。

和Collibra数据办公室联系起来新万博移动客户端

虽然领域驱动的所有权提高了业务单元内的生产力,但随着时间的推移,我们发现如果没有更广泛的框架来跨组织共享数据,这种方法是有局限性的。

我们在公司内部建立了一套高效的分布式专业知识。但可发现性有限。每个人都有点独立,用自己的方式做事。销售分析师在Excel中创建销售分析。市场营销部门用谷歌床单做了他们的工作。金融是另一种应用。很明显,我们需要重新考虑如何启用分析和支持这一关键功能的分析人员。

2020年,Collibr新万博移动客户端a数据办公室成立,其使命是创建“数据生态系统”,使我们整个组织的数据分析师能够真正发挥自己的作用。我们利用数据网格作为推进任务的框架

超越域驱动的所有权

在我们多年的数据网格之旅中,我们清楚地看到了四个数据网格支柱之间的相互关系。

虽然我们将在以后的博客中重点讨论支柱2到支柱4,但了解四支柱模型的动态是有帮助的。在Co新万博移动客户端llibra,我们开发了深厚的领域驱动专业知识——我们的许多分析师都从数据即产品的角度来看待他们的工作,这是数据网格的第二个支柱。但我们没有自助服务基础设施或联邦计算治理。这限制了我们分析师工作的范围和影响。

今天,我们正在积极实施一个全面的数据网格框架。我们用的是我们自己的产品新万博移动客户端Collibra数据目录-去做。这有多棒?我们可以激活数据网格,帮助我们的数据分析师更好地完成工作,我们正在使用自己的产品来提高可发现性、治理、质量等等。

数据网格之旅

无论您处于数据网格之旅的哪个阶段,重要的是要理解这是一个过程。你要从当前组织的优势着手——然后建立。

随着越来越多的数据被管理在一个集中的存储库中,数据办公室或it承担着管理、管理和交付大量复杂数据集的压倒性责任,这些数据集只会变得越来越复杂。

如果您的集中式单片模型已经达到了发现、理解和充分利用数据的真正障碍的地步,那么数据网格提供了一个有用的纠正框架。

查看我们的资料下载播客,学习如何让您的组织走上数据网格的道路。

____

1福布斯,《数据网格:数据的新希望》。2022年3月。

相关资源狗万新闻c

白皮书

数据网格:不要淹没在你的数据湖中

博客

数据网格101:对企业数据中最热门话题的简单概述

博客

数据网格:两张通往数据天堂的门票

查看所有资源狗万新闻c

更多像这样的故事

2022年5月11日-5最小值

数据网格101:对企业最热门话题的简单概述…

阅读更多
箭头