最近,我们的数据办公室负责人,杰伊Militscher发布了一个非常有用的一般概述数据网格。虽然数据网格是密不可分的四大支柱,这篇文章将集中在第一个支柱:域驱动的所有权。
专家控制系统在哪里
数据网格是社会和技术框架。它假设的主要挑战之一的管理分析工作负载与遗留架构知识。和重新定位域专家——而不是集中的源数据中心的生态系统是数据网格的第一原则。
四个数据网格的原则
- 域驱动的所有权
- 数据作为一个产品
- 自助服务数据基础设施
- 联合计算治理
域驱动的所有权意识到市场了解市场和销售了解销售,和集中,便于分析是低效的。当组织注入一切湖中央数据,把数据从主题专家,这可能降低效率。创新放缓。组织变得停滞不前。
我们看到了数据仓库的发展,大数据平台集群,湖泊流和上述所有数据在云中快速大众化,”提到Collibra创始人Stijn Christiaens“斯坦”。亚愽视频无论多么先进的技术,一致的障碍一直是商业所有权。”1
第一支柱的数据网格将领域专家负责数据的生态系统。在数据网格模型,领域专家不仅控制生态系统的数据,他们也善于利用数据。因为他们知道环境和业务优先级,他们负责清洗,浓缩,使数据容易获得消费者在整个组织。
从业务的角度来看(分散的所有权)使事情更容易,因为它地图更密切的实际结构你的业务。域可以遵循从业务到另一端。每个团队是负责他们的数据,他们的流程可以缩放而不影响其他团队。
——詹姆斯•塞拉的数据网格:所有权集中与分散的所有权
这些域名所有者建立和维护数据的质量和提供必要的事实和文件。集中式数据不再把这个办公室。这消除了摩擦和流线time-to-insight仅仅由于混合数据与业务人才。
然而,域驱动的所有权只是一个四柱框架的第一支柱。组织的动力学演化为每个公司是独一无二的。事实上,我们的经验在Collibra是一个有趣的案例研亚愽视频究组织进化的一个数据网格。
亚愽视频Collibra:域驱动的所有权在我们的核心
之前Zhamak Dehghani创造了这个词的数据网格的2019年,我们的共同创始人Stijn“斯坦”Christiaens和Felix Van de Maele订阅一个组织战略,看上去很像数据网格,特别是当它来到域驱动的所有权。
在Co亚愽视频llibra,构建企业内部分析方法是业务部门内员工数据分析师,而不是作为一个集中的团队。这工作很长一段时间作为一个指导原则。销售分析人坐在销售。营销分析人坐在营销。等等。
然而,清楚的是域驱动的所有权没有其他三大支柱的数据网格不能规模,我们认为是一个关键指标的评估数据网格。
啮合Collibra数据办公室亚愽视频
而域驱动的所有权在业务单位推动生产力,随着时间的推移,我们发现这种方法有局限性,没有一个清晰的框架为跨组织的共享数据。
我们已经建立了一个公司内部纪律的高性能分布式专长。但可发现性是有限的。每个人都有点自己和自己的方式做事。销售分析师创建销售分析在Excel中。营销在谷歌做了他们的表。金融在另一个应用程序。很明显,我们需要重新思考我们如何启用的分析师分析和支持这一重要功能。
2020年,Collibr亚愽视频a数据创建办公室授权创建“生态系统数据”所以我们的数据分析师整个组织可能真正擅长他们的角色。我们利用数据网格框架,推进我们的使命。
超出域驱动的所有权
已经清楚在我们多年数据网格的旅程是四个数据网格柱之间的相互关系。
当我们将重点放在柱子2到4在以后的博客,这帮助理解四柱的动态模型。在Co亚愽视频llibra,我们开发了一个深度域驱动的专长——和我们的许多分析人士认为他们的工作与data-as-a-product镜头,这是数据网格的第二支柱。但是我们没有自助服务基础设施或联合计算治理。这有限的范围和影响我们的分析师的工作。
今天,我们正在积极实施一个全面的数据网格框架。我们使用我们自己的产品亚愽视频Collibra数据目录——去做。有多好呢?我们得到了激活数据网格和帮助我们的数据分析师把工作做得更好,我们使用我们自己的产品驱动的可发现性,管理,质量,和更多。
数据网格的旅程
无论你在哪里在你的数据网格的旅程,重要的是要理解,这是一个过程。你从你当前的组织的优势,开始构建。
作为进一步的数据管理在一个集中的存储库,它数据办公室或负责的压倒性的责任管理,组织,和交付大量复杂的数据集,则更复杂。
如果你已经达到了顶点,集中整体模型是创造真正的障碍发现、理解,和最大限度利用数据,那么数据网格框架提供了一种有用的矫正。
看看我们数据下载播客学习如何把你的组织的路径数据网格。
____
1《福布斯》的数据网格:数据的新的希望。2022年3月。
