Lakehouse Monitoring으로 데이터 품질을 모니터링하세요
학습할 내용
Lakehouse Monitoring을 사용하면 Databricks 데이터 인텔리전스 플랫폼에서 직접 프로파일링, 진단, 품질을 강제할 수 있습니다. 추가 도구나 복잡성 없이 Lakehouse Monitoring은 팀이 하류 프로세스에 영향을 미치기 전에 품질 문제를 미리 발견하는 데 도움이 됩니다.
이 튜토리얼을 통해 Unity 카탈로그의 어떤 테이블에서든 모니터를 생성하고 데이터 트렌드와 이상치에 대한 인사이트를 얻는 것이 얼마나 쉬운지 확인할 수 있습니다. 이 튜토리얼은 소매 업체의 사용 사례를 모니터링하고 모니터를 구성할 때의 모범 사례를 설명합니다. 데모가 끝나면 품질 문제/이상을 발견하는 자동 생성 대시보드를 얻게 됩니다:
- 데이터 볼륨
- 데이터 무결성
- 숫자 분포 변화
- 범주형 분포 변경
Unity Catalog에 내장된 Lakehouse Monitoring을 사용하면, 이 데모는 메타데이터와 통합된 품질이 어떻게 원인 분석과 영향 분석을 수행하는 데 도움이 되는지 보여줍니다.
Lakehouse Monitoring에 대한 자세한 정보는 제품 문서(AWS | Azure)를 참조하여 오늘 시작해 보세요.