Potencializando Experiências Bancárias Personalizadas
Summary
- Desafios da Infraestrutura de Dados Tradicional: Zafin enfrentou desafios significativos com sua infraestrutura de dados tradicional, incluindo altos custos de computação, sobrecarga de manutenção e gargalos de desempenho, o que tornou a escala para acomodar volumes massivos de dados ineficiente e insustentável.
- Migração para Databricks: Ao migrar para a Plataforma de Inteligência de Dados Databricks, a Zafin alcançou velocidades de cálculo até 10 vezes mais rápidas, reduziu o tempo de entrada no mercado para novas capacidades em 30-40% e reduziu os custos de nuvem para análises em 50-70% através de escalabilidade elástica e capacidades sem servidor.
- Valor Aprimorado para o Cliente: O ambiente unificado do Databricks melhorou a produtividade e a colaboração, permitindo que a Zafin oferecesse recompensas personalizadas, insights de negócios acionáveis, transformações de dados eficientes em termos de custo e governança de dados robusta, aumentando significativamente o valor fornecido aos seus clientes bancários.
Na Zafin, nossa missão é ajudar os bancos a modernizar sua infraestrutura central para oferecer experiências excepcionais e personalizadas aos seus clientes. Para determinar os níveis de relacionamento com o cliente e fornecer recompensas personalizadas, precisávamos processar volumes significativos de dados - 100 milhões de contas com mais de 10 bilhões de saldos. Tradicionalmente, teríamos implementado esta aplicação de estratificação usando um framework de código aberto, Java Spring Boot, com um servidor PostgreSQL dedicado. No entanto, construir e escalar essa solução com uma pilha de tecnologia tradicional provou ser ineficiente e insustentável em grande escala.
A infraestrutura de dados tradicional não escala
Como muitas organizações em serviços financeiros, inicialmente contamos com soluções dedicadas de armazenamento de dados para alimentar nossas análises. Embora funcional, essa abordagem trouxe desafios significativos: altos custos de computação, sobrecarga de manutenção e gargalos de desempenho.
Com uma arquitetura de único inquilino, cada implantação de cliente requer infraestrutura dedicada. Como alguns clientes usam análises esporadicamente enquanto outros dependem ativamente dela, essa configuração era cara e ineficiente. A infraestrutura dedicada exigia ajustes constantes e incorria em custos fixos, independentemente do uso - um esforço significativo para nossas equipes de engenharia. A escalabilidade para acomodar volumes massivos de dados em milhões de contas, saldos e transações frequentemente esticava nossos sistemas tradicionais até seus limites.
Cálculos complexos, como o processamento de bilhões de registros para segmentação de clientes, estratificação e análise de padrões de relacionamento, eram executados como trabalhos em lote que demoravam para ser concluídos. Esses gargalos atrasavam o tempo para obter insights, e nossa abordagem tradicional não conseguia acompanhar a escala e a velocidade exigidas pelos bancos.
Para fornecer análises avançadas de forma contínua aos nossos clientes, precisávamos de uma plataforma econômica e escalável, capaz de lidar com volumes massivos de dados, oferecer alto desempenho e manter os custos sob controle.
Migrando para a Databricks para acelerar a inteligência de dados
Realizamos um teste de conceito (POC) para comparar nossa configuração anterior Java Spring Boot/PostgreSQL com a Plataforma de Inteligência de Dados Databricks. Veja como o POC nos permitiu melhorar nossa infraestrutura de dados.
Databricks entregou velocidades de cálculo até 10x mais rápidas em comparação com nossa solução anterior. Por exemplo, tarefas que antes levavam 4.000 segundos em nosso sistema anterior agora são concluídas em apenas 300 segundos. Com escalabilidade elástica, podemos processar bilhões de transações e saldos em milhões de contas sem comprometer o desempenho.
A migração dos fluxos de trabalho de análise reduziu o tempo de entrada no mercado para novas capacidades em 30-40% enquanto exigia menos recursos de engenharia. Em comparação com nossa configuração tradicional, o Databricks nos ajudou a acelerar o cronograma de entrega de nossa aplicação de estratificação em 30%. Com menos esforço gasto na gestão de infraestrutura, nossa equipe de engenharia pode se concentrar em construir soluções inovadoras para nossos clientes.
As capacidades Serverless do Databricks foram um divisor de águas, permitindo-nos separar a computação do armazenamento para garantir que só pagássemos pela computação que precisávamos. Essa abordagem eliminou o ônus do custo de infraestrutura ociosa. Os custos de nuvem para análises caíram de 50 a 70%, dependendo dos perfis de uso. A capacidade de escalar automaticamente com base nas cargas de dados significava que tanto os clientes de alto tráfego quanto os de uso esporádico podiam contar com uma experiência contínua e responsiva sem ajuste manual.
Os resultados foram claros: Databricks ofereceu uma solução transformadora que proporcionou desempenho superior, escalabilidade e eficiência de custos - tudo isso enquanto atendia aos rigorosos requisitos de governança de instituições financeiras altamente regulamentadas.
Entregando valor aos nossos clientes
O ambiente unificado da Databricks permite que nossas equipes lidem com a ingestão de dados, transformação e análise em um só lugar - melhorando a produtividade e a colaboração. Da ingestão de dados às transformações complexas baseadas em SQL e análises incorporadas, tudo funciona perfeitamente no Databricks, onde até mesmo usuários não técnicos podem obter insights significativos. Ao conversar com Terry Hickey, Diretor de Receita da Zafin, ele expressou: “Com a modernização de nossa infraestrutura de dados, agora podemos ajudar os bancos a descobrir facilmente insights acionáveis para impulsionar o crescimento e aprofundar os relacionamentos com os clientes.”
Com Databricks como a espinha dorsal de nossa pilha de dados moderna, conseguimos inovar mais rápido e entregar maior valor aos nossos clientes, incluindo:
- Personalização: Usando Databricks SQL e Notebooks, construímos uma aplicação de estratificação intensiva em dados que avalia saldos de clientes, produtos em posse e padrões de transações para determinar níveis de relacionamento (por exemplo, Ouro, Prata, Platina). Isso permite que os bancos ofereçam recompensas e benefícios personalizados aos clientes, incentivando-os a atingir o próximo nível com engajamento direcionado, aumentando a retenção e a lealdade.
- Inteligência de Negócios (BI): Nossa solução de análise incorporada, Zafin Analytics, ajuda os banqueiros de linha de negócios a obter insights acionáveis sobre o desempenho do produto e a eficácia da oferta. Com o ambiente integrado da Databricks, fornecemos análises prontas para uso para responder a perguntas críticas como: Como uma conta corrente está se saindo no mercado? Qual é a taxa de adoção de uma oferta promocional? Como os padrões de transações dos clientes variam entre os níveis?
- Transformações Eficientes em Termos de Custo: Com o Databricks Autoloader, ingerimos bilhões de registros de vários tipos de arquivos (Avro, CSV) armazenados no Azure Blob Storage. Isso, combinado com a escalabilidade Serverless, garante que podemos processar dados de maneira eficiente, sem superdimensionamento ou custos desnecessários.
- Garantindo Governança de Dados e Conformidade: Unity Catalog permite uma governança de dados robusta, permitindo-nos isolar ambientes de clientes de único inquilino e manter a conformidade com as regulamentações de serviços financeiros.
O impacto para nossos clientes bancários é profundo. A mesma aplicação de estratificação que antes levava um grande banco dois anos para desenvolver agora pode ser implantada por seus clientes em apenas alguns meses. Isso é uma vantagem significativa no tempo de entrada no mercado que impulsiona uma inovação e monetização mais rápidas.
“É emocionante ver como a Zafin está aproveitando a plataforma Databricks para entregar inovações orientadas por dados e IA que capacitam bancos em todo o mundo. Ao modernizar sua infraestrutura, a Zafin está permitindo que as instituições financeiras desbloqueiem novas oportunidades para personalização, engajamento do cliente e crescimento - mais rápido e eficientemente do que nunca.”— Junta Nakai, Vice-Presidente - Chefe Global de Serviços Financeiros, Cibersegurança e Setor Público GTM | Databricks
Olhando para o futuro: Aproveitando inovações em tempo real
Além de possibilitar um processamento de dados mais rápido e econômico, a Plataforma Databricks nos posicionou para futuras inovações. Estamos explorando oportunidades em IA e GenAI, como insights de estratificação em tempo real, modelagem de rentabilidade e ofertas em tempo real com as Tabelas Delta Live e capacidades de streaming da Databricks. Para otimizar ainda mais nossas capacidades analíticas, também planejamos habilitar a Federação Lakehouse para integração perfeita entre fontes de dados.
À medida que continuamos a escalar e inovar, estamos animados para desbloquear ainda mais capacidades poderosas para nossos clientes - transformando dados em insights acionáveis que impulsionam o futuro do setor bancário.
Sobre a Zafin
Fundada em 2002, a Zafin é uma provedora global de soluções SaaS para modernização e transformação de core banking. Nossa plataforma premiada permite que os bancos inovem seus modelos de negócios enquanto modernizam sua tecnologia, garantindo transparência e justiça para os bancos e seus clientes. Ao melhorar a eficiência operacional, aumentar a receita e melhorar as experiências do cliente, a Zafin capacita as instituições financeiras a alcançar seus objetivos estratégicos.
A Zafin tem sede em Vancouver, Canadá, com presença em escritórios e clientes em todo o mundo, incluindo grandes bancos como ING, CIBC, HSBC, Wells Fargo, Navy Federal Credit Union, PNC e ANZ.
Saiba mais
Executivos e Líderes de Negócios podem obter insights de colegas no Fórum de Serviços Financeiros -Mudando para Inteligência Financeira, em Nova York, em 20 de março de 2025. Inscreva-se hoje
Para profissionais técnicos, visite a página web de Inteligência de Dados para Serviços Financeiros para mais casos de uso e recursos.
(This blog post has been translated using AI-powered tools) Original Post