Databricks Auto Loader (cloudfile)

Auto Loader traite de manière incrémentale et efficace les nouveaux fichiers de données à mesure qu'ils arrivent dans le stockage cloud sans configuration supplémentaire. Dans cette démo, nous vous montrerons comment fonctionne l'Auto Loader et couvrirons ses principales capacités :

• Ingestion incrémentale et rentable (élimine la gestion inutile de listes ou d'états)
• Opération simple et résiliente : aucun réglage ou code manuel requis
• Évolutif pour des milliards de fichiers
• L'inférence de schéma et l'évolution de schéma sont gérées automatiquement pour la plupart des formats (CSV, JSON, Avro, images, etc.)

 

Pour installer la démo, obtenez un espace de travail Databricks gratuit et exécutez les deux commandes suivantes dans un carnet de notes Python.

Dbdemos est une bibliothèque Python qui installe des démonstrations complètes de Databricks dans vos espaces de travail. Dbdemos chargera et démarrera des carnets de notes, des pipelines Delta Live Tables, des clusters, des tableaux de bord Databricks SQL, des modèles d'entrepôt... Voir comment utiliser dbdemos

 

Dbdemos est distribué en tant que projet GitHub.

Pour plus de détails, veuillez consulter le GitHub fichier README.md et suivez la documentation.
Dbdemos est fourni en l'état. Voir le Licence et Avis pour plus d'informations.
Databricks n'offre pas de support officiel pour dbdemos et les actifs associés.
Pour tout problème, veuillez ouvrir un ticket et l'équipe de démonstration y jettera un coup d'œil sur une base de meilleurs efforts.