fbpx

Gerenciamento Moderno de dados na Nuvem

Compartilhar no facebook
Compartilhar no linkedin
Compartilhar no twitter
Compartilhar no whatsapp
Compartilhar no telegram

Neste artigo, discutimos alguns fundamentos do gerenciamento moderno de dados em nuvem, incluindo ferramentas e recursos importantes.

O que é gerenciamento de dados em nuvem?

O gerenciamento de dados em nuvem é a implementação de plataformas e ferramentas de gerenciamento de dados em nuvem, políticas e procedimentos que fornecem às organizações o controle de seus dados de negócios, tanto na nuvem quanto em configurações híbridas onde os dados são armazenados ou fornecidos em uma combinação de local e nuvem formulários.

A lista cada vez maior de aplicativos e ferramentas em nuvem adotados por empresas está levando a um crescimento exponencial dos dados – sejam eles estruturados, não estruturados ou semiestruturados. Como esses dados são um ativo crítico para as empresas modernas, gerenciá-los tornou-se um imperativo estratégico, especialmente à medida que o número de usuários de dados aumenta, a quantidade e os tipos de dados aumentam e os tipos de processos de negócios evoluem.

Como o Cloud Data Management difere do gerenciamento de dados tradicional?

Cada vez mais, as organizações estão percebendo o valor da migração de cargas de trabalho para a nuvem, aproveitando a maior agilidade para otimizar novos produtos e serviços e reduzir CapEx e OpEx. À medida que as empresas continuam a mudar as operações e aplicativos de TI para a nuvem, a necessidade de ferramentas e plataformas de gerenciamento de dados mais centradas na nuvem é vital.

As ferramentas tradicionais de gerenciamento de dados funcionam bem para cargas de trabalho locais, mas tendem a ter dificuldades quando as cargas de trabalho baseadas em nuvem estão envolvidas.

Uma maneira pela qual as ferramentas de gerenciamento de dados são centradas na nuvem é desenvolvendo-as como nativas da nuvem – o que significa que são arquitetadas para serem executadas na natureza elástica e distribuída exigida pelas plataformas modernas de computação em nuvem. Alguns outros princípios importantes das plataformas de gerenciamento de dados em nuvem (também conhecidas como plataformas de gerenciamento de dados em nuvem) são:

  • Eles podem oferecer suporte a dados em vários ecossistemas de nuvem (várias nuvens).
  • Eles são orientados por API e fornecidos como microsserviços.
  • Eles usam construções modernas como contêineres e sem servidor para uma implantação mais rápida e escalonável.
  • Eles são simples de instalar e configurar.
  • Eles são fáceis de gerenciar, com atualizações automáticas e gerenciamento de patches.
  • Eles são cobrados com base na utilização do serviço.
  • Principais ferramentas e recursos para gerenciamento de dados na nuvem

Conforme as organizações planejam ou retrabalham suas arquiteturas de dados em resposta às mudanças nos requisitos e processos de negócios, o gerenciamento de dados em nuvem deve ser uma consideração importante. Aqui estão cinco recursos importantes a serem considerados ao criar sua estratégia de nuvem:

Integração na nuvem
A nuvem pode impulsionar a inovação, revelar eficiências e ajudar a redefinir os processos de negócios. Mas esses benefícios só são alcançados quando sua infraestrutura de nuvem permite que você integre, sincronize e relacione todos os dados, aplicativos e processos – no local ou em qualquer parte de seu ambiente de várias nuvens.

Em um nível mais granular, as empresas podem estar procurando projetar, executar e automatizar processos de negócios que abrangem aplicativos. Eles podem estar procurando integrar aplicativos em tempo real usando orquestração, APIs e mensagens ou executando tarefas de integração em lote de extração, transformação e carga (ETL) para suas plataformas analíticas (data warehouses em nuvem e data lakes) ou para manter os dados do aplicativo sincronizados.

Para essas situações, as organizações precisam de dados inteligentes e integração de aplicativos e ferramentas de gerenciamento de API, bem como um amplo conjunto de recursos de conectividade – todos os quais formam os principais componentes de uma plataforma de integração como serviço moderna (iPaaS).

Qualidade e governança de dados em nuvem
À medida que as empresas colocam os dados no centro de seus processos de negócios, as organizações mais bem-sucedidas reconhecem o papel dos dados confiáveis ​​e de alta qualidade em suas iniciativas de transformação digital. Como observa esta pesquisa recente da McKinsey & Company, “as empresas que capacitam os funcionários a usar dados consistentemente como base para sua tomada de decisão têm quase duas vezes mais probabilidade do que outras de relatar o alcance de seus objetivos de dados e análises”. Além disso, os regulamentos de dados tornaram-se cada vez mais complexos e dinâmicos.

Para levar suas iniciativas adiante, uma organização deve garantir que as pessoas em toda a empresa sejam capazes de localizar, acessar, compreender e usar dados facilmente. Você deve permitir que os usuários de negócios e de TI percebam rapidamente o valor comercial de dados confiáveis, limpos e de alta qualidade com processos automatizados de governança e qualidade de dados baseados em nuvem.

Privacidade e segurança de dados na nuvem
Cada vez mais, as organizações estão percebendo o valor de migrar cargas de trabalho para a nuvem, aproveitando a nova agilidade para otimizar novos produtos e serviços e reduzir CAPEX / OPEX para deixar seus concorrentes no espelho retrovisor. Em nuvem pública e ambientes híbridos, os dados estão se tornando mais expostos aos riscos de abuso e ataques além do firewall tradicional.

Proteger seus dados, gerenciar o acesso seguro e impor a conformidade e as políticas de uso adequadas para reduzir o risco de violações de segurança e abuso corporativo não é apenas essencial para os negócios – agora é a lei.

A proteção de dados em nível de sistema tradicional que permanece no local não é páreo para a “nuvem de tempestade” perfeita de hoje de compartilhamento expandido de dados através de fronteiras e aplicativos migrados, o crescimento acelerado de novos tipos de dados considerados confidenciais e pessoais e volumes crescentes de dados ingeridos em repositórios de dados.

A reação do cliente por violações de dados agora costuma ser direcionada a organizações despreparadas, bem como a criminosos mal-intencionados. Conformidade não é mais apenas uma questão de aumento de multas e penalidades; a lealdade de longo prazo do cliente também está em jogo.

Mas há uma vantagem – a garantia de privacidade ajuda a democratizar o uso seguro de dados, acelerar e desbloquear a migração da carga de trabalho da nuvem e fornecer produtos e serviços inovadores que se baseiam na confiança do cliente. Ferramentas integradas de privacidade e proteção de dados em nuvem podem ajudá-lo a automatizar a descoberta e classificação de dados confidenciais, mapear identidades para propriedade clara e apoiar regras de acesso a dados, operacionalizar políticas de privacidade, modelar e analisar a exposição a riscos de dados em armazenamentos e locais de dados e orquestrar a proteção de dados.

Uma abordagem integrada baseada em inteligência e automação orientada por metadados pode ajudar a permitir uma ação rápida – como a resposta ao surto de SARS – fornecendo transparência no uso de dados, mascaramento de dados para proteção de informações pessoais e monitoramento da eficácia dos controles em vigor para relatórios de auditoria.

Cloud Master Data Management
Com todos os dados sendo gerados em todas as linhas de negócios, você precisa de uma visão completa de 360 ​​graus de qualquer domínio e relacionamento na nuvem. Além disso, há um impulso para o gerenciamento inteligente de dados e busca e visualização aprimoradas de dados, bem como verificação e enriquecimento aprimorados – o objetivo é atingir um “recorde de ouro”, que fornece acesso ao quadro mais puro, validado e completo dos registros individuais em seu domínio.

Os recursos de gerenciamento de dados mestre em nuvem sincronizam os dados mais críticos em vários sistemas em sua organização, permitindo que as equipes de IA e analítica obtenham percepções profundas desses dados para impulsionar seus negócios.

Cloud Metadata Management / Data Cataloging
As empresas estão transformando seus negócios para impulsionar a inovação, melhorar a experiência do cliente, reduzir custos e aumentar a eficiência operacional.

Não importa quais sejam os motivadores de negócios, todas essas transformações de negócios dependem de dados bons e confiáveis. Mas, à medida que o cenário de dados fica mais complexo, os dados são diversificados e distribuídos em muitos departamentos, aplicativos, armazéns de dados e lagos de dados diferentes (alguns locais, outros na nuvem), tornando um desafio saber exatamente quais dados você tem e onde.

Uma solução abrangente de catalogação de dados usa descoberta de dados baseada em aprendizado de máquina para escanear e catalogar ativos de dados em toda a empresa e fornecer a analistas, cientistas de dados e usuários de TI uma pesquisa semântica poderosa, linhagem de dados detalhada, estatísticas de criação de perfil, scorecards de qualidade de dados, visualizações holísticas de relacionamento , curadoria de dados automatizada, curadoria de dados de origem coletiva e muito mais.

Ao permitir a descoberta de dados abrangente em toda a empresa, os catálogos de dados inteligentes permitem que as empresas maximizem o valor de seus ativos de dados. Aproveitando uma combinação de metadados técnicos, comerciais, operacionais e de uso, os catálogos de dados inteligentes também ajudam a construir a base de metadados para dar suporte à modernização da nuvem, governança de dados e outras prioridades de negócios.

Inteligência aprimorada por meio de IA
Com o ritmo geométrico no qual os dados corporativos estão crescendo, o processamento de dados agora requer o auxílio da Inteligência Artificial. Plataformas de gerenciamento de dados em nuvem abrangentes fornecem recursos de IA chave que permitem a descoberta automática e catalogação de dados em vários sistemas, como ERP, CRM, etc., descoberta automática de relacionamentos entre os dados do cliente e percepções correspondentes a pessoas específicas, automação da integração de dados e dados tarefas de qualidade, gerenciamento e aplicação de políticas inteligentes e muito mais.

O valor e os benefícios do gerenciamento de dados em nuvem
À medida que a empresa moderna evolui e se torna mais centrada na nuvem, é fundamental ter as ferramentas e os processos certos para gerenciar todos os dados.

O gerenciamento de dados em nuvem envolve o ciclo de vida de ponta a ponta dos dados, desde a criação até a aposentadoria, e a progressão controlada dos dados de e para cada estágio de seu ciclo de vida. Ajuda a minimizar os riscos e custos de não conformidade regulamentar, complicações legais e violações de segurança. Ele também fornece acesso a dados precisos quando e onde forem necessários, sem ambigüidade ou conflito, evitando falhas de comunicação.

Em um alto nível, aqui estão alguns dos principais benefícios que você pode obter ao ter a estratégia e as ferramentas certas de gerenciamento de dados em nuvem:

  • Análise aprimorada por meio de integração e ingestão aprimoradas.
  • Segurança de dados aprimorada e postura de governança de dados.
  • Melhoria da qualidade dos dados para evitar o problema do “lixo entra, lixo sai”.
  • Descoberta rápida de dados e gerenciamento aprimorado de metadados.
  • Manutenção e gerenciamento de registros otimizados entre sistemas – alcançando o “recorde dourado”.

Exemplo de caso de uso: modernização com um data warehouse em nuvem

Uma das principais iniciativas de modernização digital realizadas pelas organizações é a adoção de sistemas de data warehouse (CDW) em nuvem para análises aprimoradas. Os CDWs oferecem uma infinidade de benefícios em relação aos armazenamentos de dados tradicionais, como escalabilidade e elasticidade aprimoradas, flexibilidade e agilidade, tempo de retorno mais rápido, melhor desempenho e muito mais.

As ferramentas certas de gerenciamento de dados em nuvem podem ajudar e acelerar o processo de migração de cargas de trabalho de um data warehouse local existente para a nuvem ou construir um novo data warehouse em nuvem. Existem várias etapas envolvidas na entrega de um CDW otimizado, incluindo (mas não se limitando a):

  • Descobrindo os dados certos – você deseja encontrar e migrar todos os dados relevantes para o novo CDW. Por exemplo, há dados em outro aplicativo em nuvem, como Salesforce, que seriam úteis? Existe algo que existe apenas em uma planilha no OneDrive que é relevante?
  • Integre dados de várias fontes no CDW – Os dados em seu data warehouse na nuvem virão de uma matriz de fontes em rápida expansão, cada uma com seus próprios modelos e formato de dados. Internamente, as fontes de dados potenciais incluem aplicativos hospedados em nuvens públicas, como aplicativos de software como serviço (SaaS)
  • Garanta a qualidade dos dados – se os dados que você inserir em seu CDW forem de baixa qualidade, o mesmo ocorrerá com os insights gerados. A qualidade dos dados deve ser um requisito fundamental para qualquer projeto de análise de sucesso.
  • Sem um conjunto abrangente de ferramentas de gerenciamento de dados em nuvem para ajudar com os itens acima, a maioria dos projetos de CDW enfrentará obstáculos para uma operação perfeita.

Conclusão
Uma estratégia eficaz de gerenciamento de dados em nuvem é fundamental para a empresa moderna – especialmente à medida que as organizações aceleram a adoção de infraestrutura, aplicativos e serviços em nuvem.

Esteja você movendo e sincronizando dados em sistemas de dados, protegendo dados organizacionais e de clientes críticos, garantindo dados de alta qualidade em sistemas ou descobrindo insights profundos sobre a linhagem de dados corporativos críticos, definir os requisitos de dados e soluções potenciais é a primeira etapa.

Uma solução de plataforma pode ser uma vantagem principal, pois todos os recursos principais são colocados sob um guarda-chuva unificador, compartilhando um modelo de dados comum.