Na Zafin, nossa missão é ajudar os bancos a modernizar sua infraestrutura central para oferecer experiências excepcionais e personalizadas aos seus clientes. Para determinar os níveis de relacionamento com o cliente e fornecer recompensas personalizadas, precisávamos processar volumes significativos de dados - 100 milhões de contas com mais de 10 bilhões de saldos. Tradicionalmente, teríamos implementado esta aplicação de estratificação usando um framework de código aberto, Java Spring Boot, com um servidor PostgreSQL dedicado. No entanto, construir e escalar essa solução com uma pilha de tecnologia tradicional provou ser ineficiente e insustentável em grande escala.
Como muitas organizações em serviços financeiros, inicialmente contamos com soluções dedicadas de armazenamento de dados para alimentar nossas análises. Embora funcional, essa abordagem trouxe desafios significativos: altos custos de computação, sobrecarga de manutenção e gargalos de desempenho.
Com uma arquitetura de único inquilino, cada implantação de cliente requer infraestrutura dedicada. Como alguns clientes usam análises esporadicamente enquanto outros dependem ativamente dela, essa configuração era cara e ineficiente. A infraestrutura dedicada exigia ajustes constantes e incorria em custos fixos, independentemente do uso - um esforço significativo para nossas equipes de engenharia. A escalabilidade para acomodar volumes massivos de dados em milhões de contas, saldos e transações frequentemente esticava nossos sistemas tradicionais até seus limites.
Cálculos complexos, como o processamento de bilhões de registros para segmentação de clientes, estratificação e análise de padrões de relacionamento, eram executados como trabalhos em lote que demoravam para ser concluídos. Esses gargalos atrasavam o tempo para obter insights, e nossa abordagem tradicional não conseguia acompanhar a escala e a velocidade exigidas pelos bancos.
Para fornecer análises avançadas de forma contínua aos nossos clientes, precisávamos de uma plataforma econômica e escalável, capaz de lidar com volumes massivos de dados, oferecer alto desempenho e manter os custos sob controle.
Realizamos um teste de conceito (POC) para comparar nossa configuração anterior Java Spring Boot/PostgreSQL com a Plataforma de Inteligência de Dados Databricks. Veja como o POC nos permitiu melhorar nossa infraestrutura de dados.
Databricks entregou velocidades de cálculo até 10x mais rápidas em comparação com nossa solução anterior. Por exemplo, tarefas que antes levavam 4.000 segundos em nosso sistema anterior agora são concluídas em apenas 300 segundos. Com escalabilidade elástica, podemos processar bilhões de transações e saldos em milhões de contas sem comprometer o desempenho.
A migração dos fluxos de trabalho de análise reduziu o tempo de entrada no mercado para novas capacidades em 30-40% enquanto exigia menos recursos de engenharia. Em comparação com nossa configuração tradicional, o Databricks nos ajudou a acelerar o cronograma de entrega de nossa aplicação de estratificação em 30%. Com menos esforço gasto na gestão de infraestrutura, nossa equipe de engenharia pode se concentrar em construir soluções inovadoras para nossos clientes.
As capacidades Serverless do Databricks foram um divisor de águas, permitindo-nos separar a computação do armazenamento para garantir que só pagássemos pela computação que precisávamos. Essa abordagem eliminou o ônus do custo de infraestrutura ociosa. Os custos de nuvem para análises caíram de 50 a 70%, dependendo dos perfis de uso. A capacidade de escalar automaticamente com base nas cargas de dados significava que tanto os clientes de alto tráfego quanto os de uso esporádico podiam contar com uma experiência contínua e responsiva sem ajuste manual.
Os resultados foram claros: Databricks ofereceu uma solução transformadora que proporcionou desempenho superior, escalabilidade e eficiência de custos - tudo isso enquanto atendia aos rigorosos requisitos de governança de instituições financeiras altamente regulamentadas.
O ambiente unificado da Databricks permite que nossas equipes lidem com a ingestão de dados, transformação e análise em um só lugar - melhorando a produtividade e a colaboração. Da ingestão de dados às transformações complexas baseadas em SQL e análises incorporadas, tudo funciona perfeitamente no Databricks, onde até mesmo usuários não técnicos podem obter insights significativos. Ao conversar com Terry Hickey, Diretor de Receita da Zafin, ele expressou: “Com a modernização de nossa infraestrutura de dados, agora podemos ajudar os bancos a descobrir facilmente insights acionáveis para impulsionar o crescimento e aprofundar os relacionamentos com os clientes.”
Com Databricks como a espinha dorsal de nossa pilha de dados moderna, conseguimos inovar mais rápido e entregar maior valor aos nossos clientes, incluindo:
O impacto para nossos clientes bancários é profundo. A mesma aplicação de estratificação que antes levava um grande banco dois anos para desenvolver agora pode ser implantada por seus clientes em apenas alguns meses. Isso é uma vantagem significativa no tempo de entrada no mercado que impulsiona uma inovação e monetização mais rápidas.
“É emocionante ver como a Zafin está aproveitando a plataforma Databricks para entregar inovações orientadas por dados e IA que capacitam bancos em todo o mundo. Ao modernizar sua infraestrutura, a Zafin está permitindo que as instituições financeiras desbloqueiem novas oportunidades para personalização, engajamento do cliente e crescimento - mais rápido e eficientemente do que nunca.”— Junta Nakai, Vice-Presidente - Chefe Global de Serviços Financeiros, Cibersegurança e Setor Público GTM | Databricks
Além de possibilitar um processamento de dados mais rápido e econômico, a Plataforma Databricks nos posicionou para futuras inovações. Estamos explorando oportunidades em IA e GenAI, como insights de estratificação em tempo real, modelagem de rentabilidade e ofertas em tempo real com as Tabelas Delta Live e capacidades de streaming da Databricks. Para otimizar ainda mais nossas capacidades analíticas, também planejamos habilitar a Federação Lakehouse para integração perfeita entre fontes de dados.
À medida que continuamos a escalar e inovar, estamos animados para desbloquear ainda mais capacidades poderosas para nossos clientes - transformando dados em insights acionáveis que impulsionam o futuro do setor bancário.
Fundada em 2002, a Zafin é uma provedora global de soluções SaaS para modernização e transformação de core banking. Nossa plataforma premiada permite que os bancos inovem seus modelos de negócios enquanto modernizam sua tecnologia, garantindo transparência e justiça para os bancos e seus clientes. Ao melhorar a eficiência operacional, aumentar a receita e melhorar as experiências do cliente, a Zafin capacita as instituições financeiras a alcançar seus objetivos estratégicos.
A Zafin tem sede em Vancouver, Canadá, com presença em escritórios e clientes em todo o mundo, incluindo grandes bancos como ING, CIBC, HSBC, Wells Fargo, Navy Federal Credit Union, PNC e ANZ.
Executivos e Líderes de Negócios podem obter insights de colegas no Fórum de Serviços Financeiros -Mudando para Inteligência Financeira, em Nova York, em 20 de março de 2025. Inscreva-se hoje
Para profissionais técnicos, visite a página web de Inteligência de Dados para Serviços Financeiros para mais casos de uso e recursos.
(This blog post has been translated using AI-powered tools) Original Post