Databricks Auto Loader (cloudfile)
학습할 내용
Auto Loader는 추가 설정 없이 클라우드 저장소에 도착하는 새로운 데이터 파일을 점진적이고 효율적으로 처리합니다. 이 데모에서는 Auto Loader가 어떻게 작동하는지 보여주고 주요 기능을 소개하겠습니다:
- 점진적이고 비용 효율적인 수집 (불필요한 목록 또는 상태 처리 제거)
- 간단하고 탄탄한 작동: 튜닝이나 수동 코드가 필요 없습니다
- 수십억 개의 파일까지 확장 가능
- 스키마 추론 및 스키마 진화는 대부분의 형식(CSV, JSON, Avro, 이미지 등)에 대해 자동으로 처리됩니다.
데모를 설치하려면 무료 Databricks 워크스페이스 를 받아 Python 노트북에서 다음 두 명령을 실행하세요
Dbdemos는 여러분의 작업 공간에 완전한 Databricks 데모를 설치하는 Python 라이브러리입니다. Dbdemos는 노트북, Delta Live Tables 파이프라인, 클러스터, Databricks SQL 대시보드, 웨어하우스 모델 등을 로드하고 시작합니다... dbdemos 사용 방법을 확인해 보세요
Dbdemos는 GitHub 프로젝트로 배포됩니다.
자세한 내용은 GitHub의 README.md 파일 을 참조하고 문서를 따르십시오.
Dbdemos는 그대로 제공됩니다. 자세한 내용은 라이센스 와 공지 를 참조하십시오.
Databricks는 dbdemos 및 관련 자산에 대한 공식 지원을 제공하지 않습니다.
문제가 발생한 경우 티켓을 열어주시면 데모 팀이 최선을 다해 살펴보겠습니다.
