Como a Aon Reinsurance Solutions está aproveitando o Databricks Delta Sharing para ajudar a tomar melhores decisões

A Aon plc é uma empresa global líder que oferece soluções de risco, resseguro, aposentadoria e saúde. Focando em insights baseados em dados, a Aon opera em mais de 120 países. Para as Soluções de Resseguro da Aon, Boby Azarbod, o Líder de Serviços de Dados, e Anthony Meyers, Líder de Estratégia de IA + Dados, lideram esforços para modernizar a infraestrutura de dados, melhorando a eficiência operacional e o valor para o cliente.

No setor de seguros, a habilitação de dados é vital para melhorar a avaliação de riscos, a precisão de subscrição e a detecção de fraudes. Mas os dados, de forma abstrata, podem ser difíceis de manusear e bagunçados. Melhorar o habilitamento de dados, como visibilidade de dados e compartilhamento de dados, é vital para alcançar um resultado positivo. Por exemplo, compartilhar dados de sinistros entre unidades de negócios pode ajudar a construir modelos robustos que aprimoram estratégias de precificação e agilizam o processamento de sinistros. Essa abordagem colaborativa permite que as empresas acessem dados em tempo real, reduzindo atrasos e melhorando a tomada de decisões finais.

Por que o Databricks Delta Sharing?

Como Anthony gosta de dizer, “Dados em repouso não têm valor.” Então, como tornamos os dados ativos? Começa com as arquiteturas de dados, e as melhores arquiteturas para uma solução são frequentemente as mais simples.

A Aon está dedicada a estabelecer uma estratégia sustentável de data lakehouse alinhando-se com os 6 Princípios para um Data Lakehouse Efetivo da Databricks. O Princípio # 2 é "Remover Silos de Dados e Minimizar Movimentação de Dados". A movimentação, cópia e duplicação de dados levam tempo e podem diminuir a qualidade dos dados no Lakehouse, especialmente quando levam a silos de dados. O Delta Sharing é um passo nessa direção.

• A Aon escolheu o Databricks Delta Sharing devido às suas capacidades únicas que se alinham perfeitamente com as necessidades de habilitação e compartilhamento de dados da empresa. Ao utilizar o Databricks Delta Sharing, a Aon pode fornecer aos seus clientes acesso oportuno e preciso a dados relevantes, capacitando-os a tomar decisões informadas. Este melhor acesso aos dados leva a uma maior eficiência operacional, melhores experiências do cliente e a capacidade de identificar e capitalizar novas oportunidades de negócio. No final das contas, isso impulsiona a inovação e ajuda os clientes da Aon a manter uma vantagem competitiva em seus respectivos mercados.
• A Aon implementou o Delta Sharing para fornecer acesso a dados em tempo real sem a necessidade de replicação. Essa abordagem reduz os custos de armazenamento e garante a consistência dos dados entre as plataformas. Como resultado, os clientes têm acesso oportuno aos produtos e serviços da Aon para tomar as melhores decisões possíveis.
• Reduzir o atrito dos dados também é crítico para a Aon. Delta Sharing é o primeiro protocolo de código aberto para compartilhamento seguro de dados, permitindo que a Aon compartilhe dados em várias plataformas e nuvens sem bloqueio de fornecedor. Esta flexibilidade é crucial porque permite à Aon colaborar com parceiros, internos e externos, que não usam a plataforma Databricks, garantindo uma integração e compartilhamento de dados perfeitos em diferentes ambientes.
• A governança e a linhagem dos dados precisavam ser incorporadas na arquitetura. Menos infraestrutura e partes móveis para colaborar com os dados podem ser correlacionadas ao risco de segurança. Delta Sharing se integra com o Unity Catalog, oferecendo governança centralizada que garante segurança e conformidade robustas, permitindo que a Aon gerencie, audite e rastreie o uso de dados de forma eficiente.

A Aon avaliou cuidadosamente os prós e contras entre as estratégias de dados centralizadas e descentralizadas para otimizar sua arquitetura Lakehouse. Inspirada pela recomendação de “Propriedade e arquitetura de dados descentralizada orientada ao domínio”, a Aon adotou o Delta Sharing como a espinha dorsal para a integração perfeita entre Lakehouses descentralizados, garantindo que o compartilhamento de dados permaneça seguro, eficiente e sustentável. Esta estratégia minimiza o custo total de propriedade por equipe, enquanto promove a colaboração e mantém um framework de governança unificado.

Abaixo destacamos algumas melhorias em relação às nossas abordagens existentes que utilizam uma abordagem SFTP.

Casos de Uso e Benefícios na Aon

A Aon implementou o Delta Sharing em várias equipes, como GRiDs, Plataforma de Análise de Capital de Risco, Previsão de Impacto e muitas de suas plataformas de inteligência de mercado.

Modelagem de Risco

A Aon usa o Delta Sharing para melhorar significativamente suas capacidades de modelagem de risco. Ao compartilhar dados de risco em tempo real entre as equipes, a Aon pode integrar conjuntos de dados diversos - como modelos climáticos, indicadores econômicos e dados históricos de sinistros - em suas avaliações de risco. Esta integração permite previsões mais precisas de possíveis perdas e decisões mais informadas sobre estratégias de transferência de risco.

Desenvolvimento de Produto

Delta Sharing aprimora a capacidade da Aon de construir e manter produtos, permitindo acesso em tempo real a dados em grande escala. Isso permite análise de risco em tempo real e análise prescritiva, simplificando drasticamente as práticas de I/O e limpeza. O Delta Sharing também suporta o processo de gerenciamento de mudanças, criando eficiências extremas se mudanças a montante precisarem ser feitas.

Colaboração com Parceiros

A Aon usa o Delta Sharing para facilitar a troca segura de dados. Esta capacidade apoia joint ventures ao fornecer aos parceiros, internos e externos, acesso oportuno a conjuntos de dados relevantes sem a necessidade de estarem na mesma plataforma. Esta abordagem não só melhora as ofertas de serviço, mas também reduz os custos operacionais associados aos métodos tradicionais de compartilhamento de dados.

Resultados de Negócios

A iniciativa Delta Sharing da Aon resultou em três principais resultados de negócios, cada um impulsionado pelas capacidades únicas do Databricks Delta Sharing.

• A eliminação da duplicação de dados melhorou significativamente a precisão e a velocidade do compartilhamento de dados. Ao permitir que os dados sejam compartilhados em tempo real sem replicação, a Aon pode manter uma única fonte de verdade, melhorando a integridade dos dados e reduzindo os custos de armazenamento.
• Em segundo lugar, a iniciativa aumentou o valor para o cliente, permitindo que a Aon gaste menos tempo na gestão de infraestrutura ou na busca de dados e mais na obtenção de insights a partir dos dados. Delta Sharing simplifica a colaboração de dados, permitindo que as equipes se concentrem em fornecer insights acionáveis para os clientes rapidamente.
• Em terceiro lugar, a segurança foi reforçada, pois o Delta Sharing reduz a complexidade da infraestrutura de compartilhamento de dados, o que se correlaciona com menores riscos de segurança. Ao simplificar o processo de compartilhamento de dados, a Aon garante que os dados do cliente estejam melhor protegidos.

Melhores Práticas e Aprendizados Até Agora

Aqui estão três aprendizados-chave que a Aon quer compartilhar com a comunidade de compartilhamento de dados

1. Invista Tempo no Alinhamento e Estratégia dos Stakeholders

Ao implementar o Delta Sharing, é essencial alocar tempo e recursos para se alinhar com as equipes internas de stakeholders, incluindo jurídico e conformidade. Essas equipes desempenharão um papel crítico para garantir que a solução seja aceita e endossada em toda a organização. Evite definir entregas rígidas quando houver dependências dessas equipes, pois a contribuição delas é crucial para o sucesso a longo prazo.

2. Aborde Proativamente a Integração entre Plataformas

Se sua organização usa várias plataformas de nuvem como AWS, GCP e Azure, garanta que o compartilhamento funcione perfeitamente entre elas. Estabeleça proativamente conexões entre elas para permitir um compartilhamento de dados e colaboração suaves, maximizando o valor da sua arquitetura de lakehouse.

3. Compartilhe Modelos, Não Apenas Dados

Além de compartilhar dados brutos, recomendamos o compartilhamento de modelos de IA entre plataformas para promover maior colaboração e inovação. A Aon desenvolve modelos no Databricks na AWS e consome esses modelos no Azure Databricks através do Delta Sharing, eliminando a necessidade de duplicar repositórios de código. Esta abordagem simplifica os fluxos de trabalho e melhora a eficiência do deployment de modelos entre plataformas.

O que vem a seguir?

A Aon planeja expandir o uso do Delta Sharing explorando oportunidades adicionais:

• A Aon planeja usar o Delta Sharing para melhorar como os dados e modelos são compartilhados entre diferentes linhas de solução e regiões. Essa abordagem permite uma colaboração mais suave, garantindo que os dados permaneçam seguros, ajudando as equipes a trabalhar juntas de forma mais eficiente sem arriscar a confidencialidade
• A Aon planeja usar o Delta Sharing para agilizar a colaboração em toda a cadeia de valor do seguro. Ao compartilhar dados de forma segura, os clientes da Aon se beneficiarão de uma colaboração mais rápida e eficiente em todo o processo de seguro. Isso levará a uma maior precisão na gestão de políticas, processamento de sinistros mais rápido e decisões de subscrição mais informadas.
• A Aon está procurando incorporar conjuntos de dados externos do Databricks Marketplace em seus fluxos de trabalho de modelagem de risco ou processamento de sinistros, melhorando a precisão e eficiência dessas operações.

(This blog post has been translated using AI-powered tools) Original Post