개인화된 방식으로 시청자 연결
운영 효율 향상으로 전반적 비용 절감
Viacom18 Media Pvt. Ltd.는 인도에서 가장 빠르게 성장하는 엔터테인먼트 네트워크로, 지난 10년 사이에 무려 40배의 성장을 이룩했습니다. 이 회사는 매월 6억 명 이상의 시청자에게 멀티 플랫폼, 다세대, 다문화적 브랜드 경험을 제공합니다. Viacom18은 수많은 시청자에게 보다 흥미로운 경험을 제공하려면 데이터를 대규모로, 효율적으로 처리해야 한다는 것을 깨닫고 하둡 환경을 떠났습니다. Databricks로 옮겨온 이후에는 인프라 관리를 간소화하고, 데이터 파이프라인 속도와 데이터 팀의 생산성을 향상했습니다. 현재 Viacom18은 구독자에게 더욱 관련이 깊은 시청 경험을 제공하면서도, 비즈니스를 최적화하고 ROI를 높일 기회를 찾고 있습니다.
구독자 증가와 방대한 시청 데이터로 인해 하둡이 한계에 도달
Network18과 ViacomCBS 사이의 합작 회사인 Viacom18은 시청자에게 매우 개인화된 시청 경험을 제공하는 데 초점을 맞춥니다. 이 전략의 핵심을 수행하려면 일일 시청자 데이터를 기반으로 강력한 고객 분석 기능을 구축할 수 있는 엔터프라이즈 데이터 아키텍처를 구현해야 합니다. 하지만 인도 전역에 수많은 소비자가 있기 때문에 데이터 용량만으로도 감당이 어렵습니다. VOOT(Viacom18의 온디맨드 구독 플랫폼)에서 45,000시간 분량 이상의 일일 콘텐츠를 수집하고 처리해야 해서 하루에 700GB~1TB의 데이터는 기본으로 발생합니다.
Viacom18의 디지털 변혁 및 기술 부문 상무, Parijat Dey는 “콘텐츠는 우리가 하는 일의 핵심입니다. 저희는 개인 시청 기록과 선호도를 기반으로 전 세계의 시청자에게 개인화된 콘텐츠 추천을 제공하여 시청률과 고객 충성도를 높입니다."라고 말했습니다.
Viacom18의 데이터 레이크는 온프레미스 하둡을 사용하여 운영하는데, 경영진이 정의한 SLA 내에서 90일분의 연속 데이터를 처리할 수 없었고, 분석 요구 사항을 달성하기에 어려움이 있었습니다. 이는 고객의 경험뿐만 아니라 전반적인 비용에도 영향을 미쳤습니다.
Viacom18은 이러한 당면 과제를 해결하기 위해 하루의 단편적인 분석이 아니라 장기간에 걸쳐 데이터를 분석할 수 있는 현대적 데이터 웨어하우스가 필요했습니다. 또한, 자동 확장 등의 기능으로 클러스터를 간편하게 프로비저닝하여 컴퓨팅 비용을 낮출 수 있도록 ㅇㄴ프라를 단순화한 플랫폼이 필요했습니다.
Databricks를 활용한 신속한 데이터 처리로 분석 및 ML에 활용
Viacom18은 필수적인 처리 성능과 데이터 사이언스 기능을 지원하기 위해 인도의 주요 Salesforce, 데이터 분석 및 빅데이터 컨설팅 회사인 Celebal Technologies와 파트너를 맺었습니다. Celebal의 팀은 Azure Databricks를 활용하여 Viacom18에게 데이터 웨어하우징 기능을 현대화하고 대규모로 빠르게 데이터를 처리하는 통합 데이터 분석 플랫폼을 제공했습니다.
Delta Lake 내에서 데이터를 캐싱할 수 있게 된 덕분에, 그동안 절실히 원했던 쿼리 속도를 높일 수 있었습니다. 또한, 자동 확장 기능을 지원하고 스토리지와 컴퓨팅을 클러스터 관리를 통해 Viacom18의 인프라 관리를 단순화했고 운영 비용도 최적화되었습니다. Dey는 “Delta Lake 덕분에 데이터 파이프라인을 간소화하는 전략을 추진할 수 있었습니다. 이 덕분에 운영 비용은 절감하면서 동시에 다운스트림 분석과 데이터 사이언스의 인사이트 도출 시간(time-to-insight)은 짧아졌어요."라고 설명했습니다.
Viacom18은 노트북 기능이라는 예상치 못한 보너스를 얻었습니다. 이 공통적인 업무 공간은 데이터 팀에게 모델 훈련, 즉석 분석, 대시보드 생성, PowerBI를 통한 보고 등, 모든 업무에서 협업하고 생산성을 높일 수 있는 방법을 마련해주었습니다.
시청자 데이터를 활용하여 개인화된 시청 경험 제공
Celebal Technologies 및 Databricks는 Viacom18이 혁신적 고객 솔루션과 인사이트를 제공하고, 팀 간 협업과 생산성을 높일 수 있도록 도와주었습니다. Viacom18은 Databricks를 사용한 이후로 데이터를 매끄럽게 탐색하면서도 고객에게 더 나은 서비스를 제공할 수 있게 되었습니다.
Dey는 “Viacom18의 엔지니어들은 Databricks를 사용하여 방대한 데이터를 입맛 대로 잘라서 고객 행동 및 참여 인사이트를 애널리스트와 데이터 사이언티스트에게 제공할 수 있습니다."라고 말했습니다.
성능이 향상되었을 뿐만 아니라, 쿼리 시간도 단축되어서 하루에 처리하는 데이터 볼륨이 늘었는데도 총소유비용은 감소했습니다. Dey는 “Azure Databricks는 무려 26%나 프로세스를 간소화하고 생산성을 개선했습니다."라고 말했습니다.
전반적으로, Dey는 하둡에서 Databricks로 마이그레이션하고 나서 상당한 비즈니스 가치가 창출되었다고 답했습니다. 장애 비용이 감소하고, 대규모 처리 속도가 향상되었으며, 간단한 즉석 분석으로 데이터 탐색이 간편해졌고, 혁신을 통해 매우 흥미로운 고객 경험을 제공할 수 있게 되 었습니다.
