데이터브릭스, 2024 가트너® 매직 쿼드런트™ 클라우드 데이터베이스 관리 시스템 부문 리더로 선정

 데이터브릭스가 2024 Gartner® Magic Quadrant™ 클라우드 데이터베이스 관리 시스템 부문에서 4년 연속 리더로 선정되었다는 소식을 전하게 되어 매우 기쁩니다. 이번 평가에서 20개 벤더 중 리더로 인정받게 되어 큰 영광입니다. 이번 보고서에서 평가된 솔루션에는 Amazon Web Services, Google Cloud Platform, Microsoft Azure에서 제공되는 Databricks 데이터 인텔리전스 플랫폼이 포함되었습니다.

보고서의 무료 사본을 여기에서 다운로드할 수 있습니다.

리더로 선정된 것뿐만 아니라, 비전의 완성도(Completeness of Vision)와 실행 능력(Ability to Execute) 부문에서도 진전을 이루게 되어 매우 기쁩니다. 특히, 실행 능력 점수는 우리의 혁신 속도를 직접적으로 반영합니다. 지난 한 해 동안, 데이터 웨어하우징, 분석 및 AI/BI, 데이터 공유, 데이터 엔지니어링, 데이터 거버넌스, 그리고 레이크하우스 스토리지 분야에서 데이터 인텔리전스 플랫폼의 새로운 기능들을 출시했습니다:

데이터 + AI를 조직 전체로 보편화

Databricks는 데이터 웨어하우스와 데이터 레이크의 장점을 결합하고 통합하는 레이크하우스(lakehouse) 개념을 개척했습니다. 이 비전은 2020년에 실현되었으며, 이후 레이크하우스는 하나의 카테고리로 자리 잡으며 엄청난 성장을 이뤘습니다.

레이크하우스 채택이 시장에서 중요한 흐름이 된 지금, 업계는 그 어느 때보다 빠르게 혁신하고 있습니다. 기업들은 적합한 사람이 적절한 데이터를 적절한 목적으로 활용할 수 있도록 돕는 거버넌스를 강력히 요구하고 있습니다. 특히 생성형 AI(Generative AI)의 부상과 함께 이러한 거버넌스를 데이터 자산 전반에, 즉 모델과 애플리케이션을 포함한 모든 영역으로 확장해야 한다는 목소리가 커지고 있습니다.

ETL에서 데이터 웨어하우징, 생성형 AI에 이르기까지, 데이터브릭스는 전 세계 고객들이 데이터와 AI 목표를 간소화하고 가속화할 수 있도록 돕고 있습니다. 현재 우리는 전 산업 분야에 걸쳐 10,000개 이상의 글로벌 고객사를 보유하고 있으며, 이들은 레이크하우스 아키텍처를 통해 놀라운 솔루션을 구축하고 비즈니스 성과를 창출하고 있습니다.

“데이터 환경이 분산되고 각 비즈니스 부서가 자체 솔루션을 도입하면서, 기업들은 공급업체 종속과 독점 데이터 포맷을 피해 데이터를 더 쉽게 이동할 수 있도록 해야 합니다. 이러한 과제를 해결하기 위해 데이터브릭스는 포맷 간 상호운용성과 오픈 표준 채택 등 개방성을 강화하고 있습니다." SanjMo의 수석 분석가이자 전 Gartner 부사장인 산지브 모한(Sanjeev Mohan)은 이렇게 말합니다. "데이터브릭스가 데이터와 AI 스택 전체를 개방성, 비용/성능, 엔드투엔드 거버넌스 원칙을 통해 접근하는 방식은 고객들이 장기적인 전략적 파트너로서 기대하는 바에 잘 부합합니다.”

데이터브릭스 데이터 인텔리전스 플랫폼

우리는 모든 조직의 모든 직원이 데이터와 AI를 성공적으로 활용할 수 있도록 데이터브릭스 데이터 인텔리전스 플랫폼을 설계했습니다. 이 플랫폼의 기반은 Delta Lake와 같은 오픈 테이블 포맷으로 구축된 데이터 레이크하우스입니다. 고객이 자사의 데이터를 소유하며, 특정 공급업체의 포맷이나 플랫폼에 종속되지 않습니다. 이 플랫폼 위에서 데이터와 AI를 위한 거버넌스를 통합할 수 있도록 지원합니다. 데이터 환경이 분산되어 있는 상황에서, 우리는 생태계 전반의 상호운용성을 강화해 데이터 포맷과 상관없이 모든 데이터를 더욱 쉽게 활용할 수 있도록 돕고자 합니다.

데이터 인텔리전스 엔진은 플랫폼 전반에 걸쳐 통합되어 데이터의 의미와 워크로드 전반에서의 흐름을 이해할 수 있습니다. 이 기술은 자동화된 최적화를 가능하게 할 뿐만 아니라, 기술 사용자와 비즈니스 사용자 모두가 자연어를 통해 데이터를 발견하고 AI를 비즈니스 맥락에서 활용할 수 있도록 돕습니다.

거버넌스, 보안, 규제 준수는 데이터 중심 조직에 매우 중요합니다. 이를 통해 모든 데이터 자산이 기업 전체에서 안전하게 유지되고 관리될 수 있기 때문입니다. Databricks 플랫폼 내에서 Unity Catalog는 레이크하우스와 AI의 강점을 통합하여 데이터를 포괄적으로 이해하고, 기술 사용자와 비즈니스 사용자의 생산성을 높이는 맥락 기반 및 도메인별 통찰력을 제공합니다. Unity Catalog는 신뢰할 수 있는 데이터와 AI 자산을 어떤 도구, 컴퓨팅 엔진, 클라우드 플랫폼에서도 원활하게 검색, 액세스, 공유할 수 있도록 지원합니다.

데이터 웨어하우징은 새로운 개념이 아니지만, 여기에 AI 기반 인텔리전스를 통합하는 것은 새로운 혁신입니다. 고객들은 복잡한 설정 관리에 시간을 덜 들이고, 데이터를 통해 인사이트를 얻는 데 더 많은 시간을 할애하고 싶어 합니다. 또한 비용 관리 역시 중요합니다. Databricks SQL은 지능형 서버리스 데이터 웨어하우스로, 모든 SQL 및 BI 애플리케이션을 확장 가능한 방식으로 실행하며, 지속적으로 성능을 개선합니다. 통합 거버넌스 모델, 오픈 포맷 및 API, 그리고 고객이 선택한 도구와 함께 작동하며, 특정 공급업체 종속이 없습니다. 2022년 Databricks SQL이 도입된 이후, 수천 개의 고객사가 기존 레거시 또는 클라우드 데이터 웨어하우스에서 이를 도입했습니다. 우리는 지속적으로 성능과 총 소유 비용(TCO)을 개선하고 있으며, 최근에는 AI 최적화와 기능 향상을 통해 데이터 워크로드를 2022년보다 77% 더 빠르게 실행할 수 있도록 개선했습니다.

기업들이 조직 내 전반적으로 인사이트를 확장하려는 상황에서, 우리는 모든 사용자를 위한 지능형 분석 제공에 중점을 두고 있습니다. AI/BI는 Databricks SQL에 깊이 통합되어 누구나 데이터를 자연어로 질문하고, 신뢰할 수 있는 AI 기반의 적합한 인사이트를 얻을 수 있도록 지원합니다. 데이터 인텔리전스로 구동되는 AI/BI는 단순히 기존 BI 시스템에 AI 보조 기능을 추가하는 것을 넘어, 전체 데이터 환경, 사용 패턴, 비즈니스 의미를 학습합니다. 이러한 깊이 있는 지식은 복잡한 실제 데이터에서도 정확한 답변을 제공하며, 조직 내 모든 구성원이 분석을 활용할 수 있도록 보편화합니다.

분산된 데이터 환경은 기업과 클라우드 간 복잡한 데이터 공유 문제를 수반합니다. 데이터와 협업의 도달 범위와 영향을 극대화하려면 오픈 접근 방식이 필수적입니다. Databricks 데이터 인텔리전스 플랫폼 내 Delta Sharing 오픈 프로토콜은 고객이 데이터를 쉽게 공유하고 AI 자산을 안전하게 협력하여 혁신을 가속화할 수 있도록 지원합니다. 또한, 타사 데이터와의 협업을 위해 Databricks Marketplace는 데이터, 분석, AI에 대한 모든 요구를 충족하는 오픈 마켓플레이스로 기능합니다.

다음 단계

우리가 4년 연속 리더로 인정받고, 비전의 완성도와 실행 능력 모두에서 지속적으로 개선된 것은 데이터 팀을 하나로 통합하며, 품질, 속도, 그리고 민첩성을 갖춘 차세대 데이터 및 AI 애플리케이션을 구축할 수 있도록 지원하는 우리의 역량을 입증하는 것이라 믿습니다. 우리는 데이터가 비즈니스 성장에 필수적인 원동력이며, AI가 이 흐름을 배가시키는 강력한 도구라고 확신합니다. 또한, AI는 데이터 플랫폼이 (올바르게 활용될 경우) 스스로를 자동으로 최적화하는 데에도 중요한 역할을 하고 있습니다. 이 여정에서 보내주신 변함없는 신뢰와 참여에 진심으로 감사드립니다.

더 많은 정보

데이터브릭스 데이터 인텔리전스 플랫폼에 대해 자세히 알아보려면 웹사이트를 방문하고 Data+AI World Tour 2024의 세션과 심층 콘텐츠를 확인하세요. 또한 LinkedIn을 팔로우하여 최신 뉴스와 업데이트를 받아보세요.

또한, Ali Ghodsi CEO가 Data and AI Summit 기조연설에서 설명하는 전략을 들을 수 있습니다. 또한, 분기별 로드맵 시리즈에서 다가오는 혁신에 대해 알아볼 수 있습니다.

2024 Gartner® Magic Quadrant™ for Cloud Database Management Systems를 읽어 보세요.

Gartner does not endorse any vendor, product or service depicted in its research publications and does not advise technology users to select only those vendors with the highest ratings or other designation. Gartner research publications consist of the opinions of Gartner's Research & Advisory organization and should not be construed as statements of fact. Gartner disclaims all warranties, expressed or implied, with respect to this research, including any warranties of merchantability or fitness for a particular purpose.

GARTNER is a registered trademark and service mark of Gartner, Inc. and/or its affiliates in the U.S. and internationally, and MAGIC QUADRANT is a registered trademark of Gartner, Inc and/or its affiliates and are used herein with permission. All rights reserved.

Gartner, Magic Quadrant for Cloud Database Management Systems, Henry Cook, Ramke Ramakrishnan, Xingyu Gu, Aaron Rosenbaum, Masud Miraz, December 18, 2024.

(번역: Youngkyong Ko)  Original Post