随着我们接近人工智能时代,对数据的需求激增成为技术发展的关键点。成功的关键在于细致的数据治理,以及在即将到来的创新时代制定平衡治理与访问的战略。进入现代数据治理的联合模型,该模型因从中央控制的转变而受到关注。这种创新方法涉及监督数据治理的各行各业的专业人士,以变革性和协作性战略重新定义技术格局。
在数据治理领域,联合方法需要集中 IT 和在其领域内生成数据的领域级团队之间的协作。领域可能包含各种方面,例如业务线、业务功能或地理位置。领域由有界上下文定义,这本质上意味着每个领域都以不同的角色运作,并依靠独特的术语和规则尽可能高效地实现其目标。这些规则、术语和目标定义了领域的边界。例如,奥的斯电梯公司在英国领域销售升降机,在美国领域销售电梯。这种方法可确保在不同的运营环境中对数据进行量身定制和高效的管理。
销售和支持领域也有各自的目标、规则和条款。如下所示,客户和产品在销售和支持环境中扮演不同的角色。这种区别意味着销售领域的客户与支持环境中的客户含义可能略有不同。有效管理这种重叠是联合治理的关键功能。
在联合治理方法中,IT 和域级团队具有特定的角色。中央 IT 管理适用于跨域的高级治理政策,执行标准以确保无缝互操作性。另一方面,域团队专注于针对其在域内收集和管理的数据制定特定政策。
从本质上讲,IT 可以创建灵活的框架,使各个领域能够高效地管理数据,满足其独特需求,同时又不脱离更广泛的治理框架。这种方法是现代数据网格架构的基石,可以提高敏捷性并促进整个组织更广泛地访问数据。
采用联合治理方法进行数据管理可以带来多种好处,特别是在实现更加分布式的架构方面。
通过实施联合数据治理,组织可以建立不仅更灵活、更具创新性而且更高效、更安全的分布式系统。
与典型的数据治理策略(IT 负责确保数据安全性、隐私性、准确性、可用性和可用性)不同,联合治理分散了这种控制。传统的一刀切方法虽然更易于管理跨域的复杂性并确保数据完整性,但可能过于严格,阻碍合法用户访问有价值的数据。
IT 的风险规避性质通常会导致严格的政策,从而限制不同数据集的可访问性和可用性。过度严格的数据治理可能会无意中导致安全漏洞,因为用户会找到不符合其要求的政策变通方法。在组织必须访问可靠数据的时代,那些施加限制的人可能会发现自己处于竞争劣势。
联合治理认识到不同的业务职能和地区具有独特的政策和法规,因此让那些最了解数据的人能够更好地管理治理规则。例如,GDPR 合规性仅在欧盟适用,并且不同的企业具有不同的数据质量阈值。
即使在数据集内,某些列也可能包含 PII 数据,而其他列则可能不包含。联合治理使领域团队能够根据他们对数据细微差别和特定业务需求的深入了解来管理治理规则。这使他们能够应用细粒度的访问控制,允许选择性地访问数据集内的敏感列。
例如,在保险领域,当局可以屏蔽表格中的敏感列,以授予销售和营销访问权限,而不会暴露机密信息,从而有助于更准确地细分市场并制定有针对性的销售策略。在金融领域,可以有选择地应用管理敏感财务数据的特定规则,避免对不太敏感的信息施加不必要的限制,并保留对有价值数据的访问权限。
此外,领域团队对数据收集过程有着深刻的理解,他们还知道他们的数据可能存在哪些弱点或质量问题,更重要的是,他们知道数据集为什么存在特定问题。这种洞察力使他们能够控制某些专业人员使用数据的方式,限制对导致问题的特定列的访问。
本质上,联合治理方法通过分散控制并使治理与不同领域的独特要求保持一致,使组织能够优化数据访问、安全性和可用性。
赋予业务领域在其专业领域内的决策权可以提高流程的灵活性。这种自主性使运营商能够迅速适应不断变化的需求,而无需寻求中央 IT 的许可。例如,销售和营销团队可以迅速响应新的机会,因为他们不再需要中央 IT 的批准才能访问相关数据。这种分散的方法使研发团队能够直接联系更易于访问的领域团队来探索新的数据集,而无需等待获得中央 IT 的授权。
鉴于 IT 部门通常人手不足,将决策权委托给各个领域不仅可以加速流程,还可以减轻这些团队的负担。此外,这种更大的自主权还可以赋予个人权力,促进参与和投入。
虽然联合数据治理承诺提供各种好处,但实施起来却很棘手,需要明确的策略。
最初的挑战在于明确定义每个领域的角色和职责。为了避免领域重叠并减少冲突和冗余,中央 IT 必须在确定哪些领域负责哪些数据集方面发挥关键作用。
在有限的中央治理和域自治之间保持适当的平衡对于成功至关重要。中央治理必须承担执行确保跨域互操作性的标准的责任。如果团体实施无法互操作的不同技术堆栈,则存在创建新数据孤岛的风险,从而抵消了打破现有数据孤岛的目的。
确保全公司范围内的数据质量标准对于建立共享数据的信任至关重要。这些要求必须由中央 IT 部门定义和执行。需要建立并严格执行中央技术框架和治理规则。
在走向联合数据治理的过程中,组织可以主动采取具体措施,确保顺利过渡。
建立框架是联合数据治理的关键。这些框架应该是智能的,能够满足领域和中央 IT 的需求。重点应该放在找出谁处于最佳位置并拥有最多的知识来最好地实施规则,而不是让不同的部门争夺控制权。此外,框架必须适应不断发展的技术和环境变化,以确保持续的效率。
由于控制权和权力分散在整个组织中,争议不可避免。当多个域对特定数据集主张权力时会发生什么?在开始数据联合之前,必须有一个预先定义的争议解决系统,类似于美国宪法中为法律事务建立的法院系统。
在联合系统中,权力分散在众多个人手中。为了取得成功,这些人需要了解自己的职责。记录角色和职责有助于减少混乱,并确保每个人都了解自己的具体职责,以实现成功的治理。
认识到没有一刀切的联合数据治理策略,组织应该允许不断发展。卓越中心可以充当最佳实践的存储库,捕捉行之有效的方法并确定需要改进的领域。这个中心枢纽促进整个组织的流程不断改进。
中央数据网格平台有利于支持联合数据治理策略。该平台是技术基础,为互操作性制定标准。独立管理治理控制但使用类似的技术和控制可加强联合框架。该平台成为定义域的机制,确保整体治理结构的凝聚力和效率。