Aon 재보험 솔루션이 어떻게 Databricks Delta Sharing을 활용하여 더 나은 결정을 내리는데 도움을 주는지 알아보세요

(이 글은 AI의 도움을 받아 번역되었습니다. 원문이 궁금하시다면 여기를 클릭해 주세요)

Aon plc는 위험, 재보험, 은퇴, 그리고 건강 솔루션을 제공하는 세계적인 선두 기업입니다. 데이터 중심의 통찰에 초점을 맞춘 Aon은 120개 이상의 국가에서 운영하고 있습니다. Aon 재보험 솔루션을 위해, Boby Azarbod, 데이터 서비스 리드, 그리고 Anthony Meyers, AI + 데이터 전략 리드가 데이터 인프라를 현대화하는 노력을 주도하고 있습니다. 이를 통해 운영 효율성과 고객 가치를 향상시킵니다.

보험 업계에서는 데이터 활성화가 위험 평가, 보험 가입 정확성, 그리고 사기 탐지를 개선하는 데 필수적입니다. 그러나 데이터는 추상적으로 볼 때 다루기 어렵고 복잡할 수 있습니다. 데이터 가시성 및 공유와 같은 데이터 활성화를 향상시키는 것은 긍정적인 결과를 달성하는 데 중요합니다. 예를 들어, 사업 부서 간에 청구 데이터를 공유하면 가격 전략을 향상시키고 청구 처리를 간소화하는 강력한 모델을 구축하는 데 도움이 될 수 있습니다. 이런 협업 접근 방식은 기업이 실시간 데이터에 접근할 수 있게 해주어 지연을 줄이고 최종 결정을 개선하는 데 도움이 됩니다.

왜 Databricks Delta Sharing인가요?

앤서니가 말하듯이, "정지 상태의 데이터는 가치가 없다." 그럼 어떻게 데이터를 활성화시킬 수 있을까요? 이는 데이터 아키텍처로 시작하며, 해결책에 가장 적합한 아키텍처는 종종 가장 단순한 것입니다.

Aon은 Databricks의 효과적인 데이터 레이크하우스를 위한 6가지 원칙과 일치시키는 것을 통해 지속 가능한 데이터 레이크하우스 전략을 구축하는 데 전념하고 있습니다. 원칙 # 2는 "데이터 사일로 제거 및 데이터 이동 최소화"입니다. 데이터 이동, 복사, 중복은 시간이 걸리며, 데이터 사일로가 생기는 경우 특히 Lakehouse의 데이터 품질을 저하시킬 수 있습니다. Delta Sharing은 그 방향으로의 한 발짝입니다.

• Aon은 회사의 데이터 활성화 및 공유 요구에 완벽하게 부합하는 독특한 기능 때문에 Databricks Delta Sharing 을 선택했습니다. Databricks Delta Sharing을 활용함으로써 Aon은 고객에게 적시에 정확한 데이터에 대한 접근을 제공할 수 있어, 그들이 정보에 기반한 결정을 내릴 수 있게 합니다. 이런 향상된 데이터 접근성은 운영 효율성 개선, 더 나은 고객 경험, 그리고 새로운 비즈니스 기회를 식별하고 활용할 수 있는 능력으로 이어집니다. 결국, 이는 혁신을 촉진하고 Aon의 고객이 각자의 시장에서 경쟁 우위를 유지하는 데 도움이 됩니다.
• Aon은 복제의 필요 없이 실시간 데이터 접근을 제공하기 위해 델타 공유를 구현했습니다. 이 접근법은 저장 비용을 줄이고 플랫폼 간의 데이터 일관성을 보장합니다. 결과적으로, 고객들은 Aon의 제품과 서비스에 적시에 접근하여 최선의 결정을 내릴 수 있습니다.
• 또한 Aon에게 데이터 마찰을 줄이는 것도 중요합니다. Delta Sharing은 첫 번째 오픈 소스 프로토콜로서, Aon이 벤더의 제한 없이 다양한 플랫폼과 클라우드 간에 데이터를 공유할 수 있게 합니다. 이 유연성은 중요한데, 이는 Aon이 Databricks 플랫폼을 사용하지 않는 파트너, 내부 및 외부와 협업하고, 다른 환경 간에 원활한 통합과 데이터 공유를 보장할 수 있게 합니다.
• 거버넌스와 데이터 라인리지는 아키텍처에 포함되어야 합니다. 데이터와 협업하기 위한 인프라와 이동 부품이 적을수록 보안 위험과 연관될 수 있습니다. Delta Sharing은 Unity Catalog와 통합되어, 강력한 보안과 준수를 보장하는 중앙 집중식 거버넌스를 제공하며, Aon이 데이터 사용을 효율적으로 관리, 감사, 추적할 수 있게 합니다.

Aon은 레이크하우스 아키텍처를 최적화하기 위해 중앙 집중식과 분산식 데이터 전략 간의 타협을 신중하게 평가했습니다. “도메인 중심 분산 데이터 소유 및 아키텍처”의 추천에 영감을 받아, Aon은 분산 레이크하우스 간의 원활한 통합을 위한 기반으로 Delta Sharing을 채택하였으며, 이를 통해 데이터 공유가 안전하고 효율적이며 지속 가능하게 유지됩니다. 이 전략은 팀별 총 소유 비용을 최소화하면서 협업을 촉진하고 통합 거버넌스 프레임워크를 유지합니다.

아래는 SFTP 접근 방식을 활용한 기존 접근 방식에 비해 개선된 점들을 강조합니다.

Aon에서의 사용 사례와 이점

Aon은 GRiDs, 위험 자본 분석 플랫폼, 영향 예측, 그리고 시장 지능 플랫폼 등 다양한 팀에서 델타 공유를 구현했습니다.

위험 모델링

Aon은 Delta Sharing을 사용하여 위험 모델링 능력을 크게 향상시킵니다. 실시간 위험 데이터를 팀 간에 공유함으로써, Aon은 다양한 데이터셋(예: 기후 모델, 경제 지표, 과거 청구 데이터)을 위험 평가에 통합할 수 있습니다. 이 통합은 잠재적 손실의 더 정확한 예측과 위험 이전 전략에 대한 더 잘 알려진 결정을 가능하게 합니다.

제품 개발

Delta Sharing은 Aon이 대규모 데이터에 실시간으로 접근하여 제품을 구축하고 유지하는 능력을 향상시킵니다. 이는 I/O와 클리닝 작업을 대폭 단순화함으로써 실시간 위험 분석과 설명적 분석을 가능하게 합니다. Delta Sharing은 또한 변경 관리 프로세스를 지원하여, 상류에서 변경이 필요한 경우 극단적인 효율성을 창출합니다.

파트너와의 협업

Aon은 안전한 데이터 교환을 촉진하기 위해 델타 공유를 사용합니다. 이 기능은 파트너, 내부 및 외부에게 동일한 플랫폼에 있지 않아도 관련 데이터셋에 적시에 접근할 수 있도록 함으로써 합작 사업을 지원합니다. 이 접근법은 서비스 제공을 향상시키는 것뿐만 아니라, 전통적인 데이터 공유 방법과 관련된 운영 비용을 줄입니다.

비즈니스 결과

Aon의 Delta Sharing 프로젝트는 Databricks Delta Sharing의 독특한 기능에 의해 주도되는 세 가지 주요 비즈니스 결과를 가져왔습니다.

• 데이터 중복을 제거하면 데이터 공유의 정확성과 속도가 크게 향상됩니다. 데이터를 실시간으로 복제 없이 공유함으로써, Aon은 단일 진실의 원천을 유지할 수 있어 데이터 무결성을 향상시키고 저장 비용을 줄일 수 있습니다.
• 둘째, 이 프로젝트는 Aon이 인프라 관리나 데이터 찾기에 덜 시간을 할애하고 데이터로부터 인사이트를 얻는 데 더 많은 시간을 할애할 수 있게 함으로써 고객 가치를 높였습니다. Delta Sharing은 데이터 협업을 단순화하여, 팀이 고객에게 신속하게 실행 가능한 통찰력을 제공하는데 집중할 수 있게 합니다.
• 세 번째로, 델타 공유는 데이터 공유 인프라의 복잡성을 줄이므로 보안 위험이 감소하고 보안이 강화되었습니다. 데이터 공유 과정을 단순화함으로써, Aon은 고객 데이터가 더 잘 보호되도록 보장합니다.

지금까지의 모범 사례와 배운 점

Aon이 데이터 공유 커뮤니티와 공유하고자 하는 세 가지 주요 학습 사항이 있습니다.

1. 이해관계자 조정과 전략에 시간 투자하기

Delta Sharing을 구현할 때는 법률 및 준수 팀을 포함한 내부 이해관계자 팀과 일치시키기 위해 시간과 자원을 할애하는 것이 필수적입니다. 이 팀들은 솔루션이 조직 전체에서 수용되고 지지받는 데 중요한 역할을 할 것입니다. 이 팀들과의 의존성이 있는 경우에는 엄격한 결과물을 설정하지 말고, 그들의 입력이 장기적인 성공에 중요하므로 고려하세요.

2. 적극적으로 플랫폼 간 통합에 대응하기

귀하의 조직이 AWS, GCP, Azure와 같은 여러 클라우드 플랫폼을 사용하는 경우, 공유가 이들 간에 원활하게 작동하는지 확인하세요. 원활한 데이터 공유와 협업을 가능하게 하기 위해 미리 연결을 설정하고, 레이크하우스 아키텍처의 가치를 극대화하세요.

3. 데이터뿐만 아니라 모델도 공유하십시오

원시 데이터 공유를 넘어서, 플랫폼 간에 AI 모델을 공유하여 더 큰 협업과 혁신을 촉진하는 것을 권장합니다. Aon은 AWS의 Databricks에서 모델을 개발하고, Delta Sharing을 통해 Azure Databricks에서 이러한 모델을 사용하여 코드 저장소를 복제할 필요를 없애줍니다. 이 접근 방식은 워크플로우를 간소화하고 플랫폼 간 모델 배포 효율성을 향상시킵니다.

다음은 무엇인가요?

Aon은 추가적인 기회를 탐색하여 Delta Sharing의 사용을 확대할 계획입니다.

• Aon은 다른 솔루션 라인과 지역 간에 데이터와 모델이 공유되는 방식을 개선하기 위해 델타 공유를 사용할 계획입니다. 이 접근법은 데이터가 안전하게 유지되면서 더 원활한 협업을 가능하게 하며, 팀이 기밀성을 위협하지 않고 더 효율적으로 함께 작업할 수 있게 돕습니다.
• Aon은 보험 가치 사슬 전반에 걸쳐 협업을 간소화하기 위해 Delta Sharing을 사용할 계획입니다. 안전하게 데이터를 공유함으로써, Aon의 고객들은 보험 처리 과정 전반에 걸쳐 더 빠르고 효율적인 협업의 이점을 누릴 수 있습니다. 이로 인해 정책 관리의 정확성이 향상되고, 청구 처리가 더 빨라지며, 보다 잘 정보화된 언더라이팅 결정이 가능해집니다.
• Aon은 Databricks Marketplace에서 외부 데이터셋을 위험 모델링 또는 청구 처리 워크플로우에 통합하려고 하며, 이는 이러한 작업의 정확성과 효율성을 향상시킵니다.