À medida que nos aproximamos da era da IA, a crescente demanda por dados se torna um ponto crucial na evolução tecnológica. O sucesso está na governança de dados meticulosa e na formação de uma estratégia para equilibrar a governança com o acesso na era iminente da inovação. Entra em cena o Modelo Federado para Governança de Dados Moderna, ganhando força por sua mudança do controle central. Essa abordagem inovadora envolve uma seção transversal de profissionais supervisionando a governança de dados, redefinindo o cenário tecnológico com uma estratégia transformadora e colaborativa.
No reino da governança de dados, uma abordagem federada envolve uma colaboração entre equipes centralizadas de TI e de nível de domínio que produzem dados dentro de seu domínio. Um domínio pode abranger várias facetas, como uma linha de negócios, função de negócios ou geografia. Os domínios são definidos pelo Bounded Context, o que significa essencialmente que cada domínio opera com uma função distinta e depende de termos e regras exclusivos para atingir seus objetivos da forma mais eficiente possível. Essas regras, termos e objetivos definem os limites de um domínio. Por exemplo, a Otis Elevator Company vende elevadores no domínio do Reino Unido e elevadores no domínio dos EUA. Essa abordagem garante um gerenciamento personalizado e eficiente de dados em diversos contextos operacionais.
Os domínios de vendas e suporte também têm seus objetivos, regras e termos. Conforme mostrado abaixo, o cliente e o produto têm papéis diferentes nos contextos de vendas e suporte. Essa distinção implica que um cliente no domínio de vendas pode ter um significado ligeiramente diferente de um cliente no contexto de suporte. Gerenciar efetivamente essa sobreposição é uma função essencial da governança federada.
Em uma abordagem de governança federada, as equipes de TI e de nível de domínio têm papéis específicos. A TI central gerencia políticas de governança de alto nível aplicáveis em todos os domínios, aplicando padrões para garantir interoperabilidade perfeita. Por outro lado, as equipes de domínio se concentram em políticas específicas para os dados que coletam e gerenciam dentro de seu domínio.
Essencialmente, a TI cria estruturas flexíveis que capacitam domínios a gerenciar seus dados de forma eficiente, alinhando-se com suas necessidades únicas, ao mesmo tempo em que permanecem dentro da estrutura de governança mais ampla. Essa abordagem é a pedra angular para uma arquitetura de malha de dados moderna, promovendo maior agilidade e facilitando acesso mais amplo aos dados em toda a organização.
Adotar uma abordagem de governança federada para gerenciamento de dados oferece vários benefícios, principalmente ao permitir arquiteturas mais distribuídas.
Ao implementar a governança de dados federada, as organizações podem estabelecer sistemas distribuídos que não são apenas mais ágeis e inovadores, mas também mais eficientes e seguros.
Em contraste com as estratégias típicas de governança de dados, onde a TI é responsável por garantir a segurança, privacidade, precisão, disponibilidade e usabilidade dos dados, a governança federada descentraliza esse controle. A abordagem convencional de tamanho único, embora mais simples de gerenciar a complexidade entre domínios, ao mesmo tempo em que garante a integridade dos dados, pode ser excessivamente restritiva, impedindo que usuários legítimos acessem dados valiosos.
A natureza avessa a riscos da TI frequentemente resulta em políticas rigorosas, limitando a acessibilidade e usabilidade de diferentes conjuntos de dados. Governança de dados excessivamente restritiva pode inadvertidamente levar a vulnerabilidades de segurança, pois os usuários encontram soluções alternativas para políticas que não atendem aos seus requisitos. Em uma era em que o acesso a dados confiáveis é fundamental para as organizações, aqueles que impõem limitações podem se encontrar em desvantagem competitiva.
Reconhecendo que diferentes funções e geografias de negócios têm políticas e regulamentações únicas, a governança federada coloca aqueles que coletam e entendem melhor os dados em uma posição muito melhor para gerenciar as regras de governança. Por exemplo, a conformidade com o GDPR é relevante apenas na União Europeia, e empresas variadas têm limites de qualidade de dados variados.
Mesmo dentro de conjuntos de dados, algumas colunas podem conter dados PII, enquanto outras podem não conter. A governança federada capacita equipes de domínio a gerenciar regras de governança com base em seu conhecimento intrincado de nuances de dados e necessidades comerciais específicas. Isso permite que elas apliquem controles de acesso refinados, permitindo acesso seletivo a colunas sensíveis dentro de um conjunto de dados.
Por exemplo, no domínio de seguros, as autoridades podem mascarar colunas sensíveis dentro de uma tabela para conceder acesso de vendas e marketing sem expor informações confidenciais, facilitando segmentações de mercado mais precisas e estratégias de vendas direcionadas. Em domínios financeiros, regras específicas que regem dados financeiros sensíveis podem ser aplicadas seletivamente, evitando restrições desnecessárias em informações menos sensíveis e preservando o acesso a dados valiosos.
Além disso, as equipes de domínio, possuindo um profundo entendimento dos processos de coleta de dados, também sabem onde seus dados podem ter fraquezas ou problemas de qualidade e, mais importante, por que os conjuntos de dados têm problemas específicos. Esse insight permite que eles controlem como certos profissionais usam os dados, limitando o acesso às colunas específicas que causam os problemas.
Em essência, uma abordagem de governança federada capacita as organizações a otimizar o acesso, a segurança e a usabilidade dos dados ao descentralizar o controle e alinhar a governança aos requisitos exclusivos de diversos domínios.
Capacitar domínios de negócios com autoridade de tomada de decisão em suas áreas de especialização traz maior agilidade nos processos. Essa autonomia permite que os operadores se adaptem rapidamente às necessidades em mudança sem buscar permissões da TI central. Por exemplo, as equipes de vendas e marketing podem responder prontamente a novas oportunidades, pois não precisam mais da aprovação da TI central para acessar dados pertinentes. Essa abordagem descentralizada permite que as equipes de P&D explorem novos conjuntos de dados entrando em contato diretamente com as equipes de domínio mais acessíveis sem esperar para obter autorização da TI central.
Considerando que os departamentos de TI geralmente estão sobrecarregados, delegar a tomada de decisões a domínios não apenas acelera os processos, mas também reduz a carga sobre essas equipes. Além disso, essa maior autonomia também empodera os indivíduos, promovendo maior participação e engajamento.
Embora a governança de dados federados prometa vários benefícios, implementá-la pode ser complicado, exigindo uma estratégia bem definida.
O desafio inicial está em definir claramente as funções e responsabilidades de cada domínio. Para evitar sobreposição de domínios e mitigar conflitos e redundâncias, a TI central deve desempenhar um papel fundamental na determinação de quais domínios são responsáveis por quais conjuntos de dados.
Manter o equilíbrio certo entre a governança central limitada e a autonomia dos domínios é crucial para o sucesso. A governança central deve ter a responsabilidade de impor padrões que garantam a interoperabilidade entre domínios. Se os grupos implementarem diferentes pilhas de tecnologia que não sejam interoperáveis, há o risco de criar novos silos de dados, negando o propósito de quebrar os existentes.
Garantir padrões de qualidade de dados corporativos é essencial para estabelecer confiança em dados compartilhados. Esses requisitos devem ser definidos e aplicados pelo departamento central de TI. Uma estrutura de tecnologia central e regras de governança precisam ser estabelecidas e rigorosamente aplicadas.
Ao navegar em sua jornada em direção à governança de dados federados, as organizações podem tomar medidas concretas de forma proativa para garantir uma transição tranquila.
Estabelecer frameworks é essencial para a governança de dados federados. Esses frameworks devem ser inteligentes, atendendo às necessidades de ambos os domínios e da TI central. O foco deve ser descobrir quem está na melhor posição e tem mais conhecimento para implementar melhor as regras, em vez de diferentes departamentos competindo pelo controle. Além disso, os frameworks devem ser adaptáveis à evolução da tecnologia e às mudanças no ambiente para garantir eficiência contínua.
Como o controle e a autoridade são distribuídos pela organização, as disputas são inevitáveis. O que acontece quando vários domínios afirmam autoridade sobre um conjunto de dados específico? Antes de embarcar na federação de dados, um sistema predefinido para resolver disputas deve existir, semelhante ao estabelecimento de um sistema judicial na Constituição dos EUA para questões legais.
Com um sistema federado, a autoridade é distribuída entre uma ampla gama de indivíduos. Para ter sucesso, esses indivíduos precisam entender quais são suas responsabilidades. Documentar papéis e responsabilidades ajuda a reduzir a confusão e garante que cada indivíduo entenda seus deveres específicos para uma governança bem-sucedida.
Reconhecendo que não há uma estratégia de governança de dados federados que sirva para todos, as organizações devem permitir a evolução. Um centro de excelência pode servir como um repositório para melhores práticas, capturando o que funciona bem e identificando áreas para melhoria. Este hub central promove o aprimoramento contínuo de processos em toda a organização.
Uma plataforma de malha de dados central pode ser benéfica no suporte a uma estratégia de governança de dados federada. Esta plataforma serve como base tecnológica, definindo o padrão para interoperabilidade. Gerenciar controles de governança de forma independente, mas usando tecnologia e controles semelhantes, reforça uma estrutura federada. A plataforma se torna o mecanismo para definir domínios, garantindo coesão e eficiência na estrutura geral de governança.