Fornecedor líder de serviços de saúde e segurança
Implementando uma plataforma de ingestão de dados de próxima geração na AWS
Sobre a Empresa
Uma empresa líder em serviços de saúde e segurança que fornece soluções multiculturais de saúde, segurança e logística de mais de 1.000 locais em +80 países.
Desafio
Em sua jornada para desenvolver ainda mais produtos e serviços competitivos, a empresa queria projetar e construir uma capacidade moderna de ingestão de dados e renovar suas plataformas legadas de extração, transformação e carregamento (ETL), armazenamento de dados e consumo de dados. Um objetivo principal era implementar um motor de decisão, consolidando e agilizando ferramentas, processos e operações de ingestão de conteúdo, ao mesmo tempo em que ajudava a garantir a integridade e a qualidade dos dados. Os dados do cliente foram coletados usando múltiplos protocolos de entrada e ingeridos em um lago de dados corporativos nativo da nuvem. A empresa estava procurando projetar e integrar Interfaces de Programação de Aplicação (APIs) de alto desempenho para ingestão e consumo de ferramentas de análise e visualização, integrações de terceiros e aplicação web e móvel.
O que fazemos
- Modelo de governança de dados
- Arquitetura de dados
- Catálogo de dados, integração de dados e ingestão de dados
- Lago de dados corporativos
- Migração de dados do Amazon Web Services (AWS)
- Serviços gerenciados na nuvem
Solução
A empresa estava preparada para adotar a nuvem pública pela primeira vez com a ajuda dos especialistas da Unisys em soluções de nuvem, aplicação e infraestrutura. A AWS foi a plataforma de ingestão de dados recomendada por sua flexibilidade, confiabilidade e escalabilidade.
Nossa equipe categorizou e criou a arquitetura da solução em três partes distintas:
- Mecanismo de entrada: API Segura, Protocolo Seguro de Transferência de Arquivos
- Pipeline de dados — Pipeline ETL sem servidor
- Armazenamento de dados — Pesquisa elástica, lago de dados nativo da nuvem e consumo de banco de dados de aplicação
O AWS Aurora com PostgreSQL 11 foi o serviço de banco de dados relacional para armazenamento de dados. Forneceu capacidades inovadoras para requisitos não funcionais e permitiu que as equipes de engenharia da empresa aumentassem o foco em problemas de negócios urgentes:
- Projetada e configurada uma infraestrutura multirregional (norte-este dos EUA e França) e de zona de multidisponibilidade para ajudar a garantir a segurança, disponibilidade e conformidade com o Regulamento Geral de Proteção de Dados (GDPR)
- Criou uma estrutura de governança de dados para múltiplos ambientes e gerenciamento de identidade e acesso
- Projetado e implementado um trabalho AWS Glue para realizar interações complexas com pesquisa elástica e inserir, atualizar e recuperar dados no sistema de gerenciamento de banco de dados relacional dos funcionários
- Implementado o AWS Data Wrangler dentro de um trabalho Python Glue usando a alquimia da linguagem de consulta estruturada (SQL) para mapeamento relacional de objetos
- Alinhado com os proprietários de negócios para redesenhar e migrar esquemas atualizados e tabelas de dados de referência e consultas refactorizadas para consumo de aplicação de um servidor SQL legado para o Aurora PostgreSQL 11
- Implementados múltiplos mecanismos de push/pull de entrada segura que processam inúmeros formatos de arquivo, estruturas de registro e tipos de dados; os dados ingeridos ficam disponíveis para consumo com ajuste mínimo
Consequência
Com a nova arquitetura, o cliente adotou a nuvem AWS, estabeleceu zonas de aterrissagem na nuvem multirregionais e desenvolveu e produziu uma solução para funcionários e clientes em menos de quatro meses:
98%
melhoria na qualidade dos dados ingeridos
45
milhões de pontos de dados de funcionários ingeridos para a integração de 4.500 clientes empresariais
HIPAA
conformidade para arquitetura e design
100%
conformidade com os requisitos de privacidade, segurança e conformidade de dados
Benefícios para a empresa
- Estabeleceu uma base de transformação digital nativa da nuvem para a empresa
- Vantagem competitiva aprimorada com produtos e serviços inovadores para o cliente por meio de uma plataforma de ingestão de dados de última geração
- Disponibilidade global 24/7/365 ativada com regulamentações de conformidade específicas da região e backup automático
Especificações Técnicas
- Ativação de múltiplos protocolos de entrada e ingestão de dados paralelos com alta disponibilidade
- Implantação bem-sucedida de um banco de dados personalizado para integração e autenticação de clientes através do Okta para atender a todas as aplicações
- Ferramentas, processos e operações de ingestão de conteúdo consolidados e simplificados
- Ganhou a capacidade de projetar e integrar APIs de alto desempenho para ingestão e consumo
- Suporte geoespacial aprimorado através do PostgreSQL 11 e PostGIS