Vollständiger Delta Live Tables Pipeline — Darlehen

Demo-Typ

Produktanleitung

Laufzeit

Selbststudium

Social Media

Was Sie lernen werden

Diese Demo ist eine Einführung in Delta Live Tables, ein ETL-Framework, das Datenengineering für alle zugänglich macht. Erklären Sie einfach Ihre Transformationen in SQL oder Python, und DLT wird die Datenverarbeitungskomplexität für Sie übernehmen:

  • ETL-Entwicklung beschleunigen: Ermöglichen Sie Analysten und Daten-Ingenieuren, schnell zu innovieren, mit einfacher Pipeline-Entwicklung und -Wartung.
  • Operationalen Aufwand reduzieren: Durch die Automatisierung komplexer Verwaltungsaufgaben und den Erhalt einer breiteren Sichtbarkeit in die Pipeline-Operationen.
  • Vertrauen Sie Ihren Daten: Mit integrierten Qualitätskontrollen und Qualitätsüberwachung, um genaue und nützliche BI, Data Science und ML zu gewährleisten.
  • Vereinfachen Sie Batch- und Streaming: Mit selbstoptimierenden und automatisch skalierenden Datenpipelines für Batch- oder Streaming-Verarbeitung

In dieser Demo verwenden wir als Eingabe einen Rohdatensatz, der Informationen über die Kredit- und historischen Transaktionen unserer Kunden enthält. Unser Ziel ist es, diese Daten nahezu in Echtzeit zu erfassen und Tabellen für unser Analystenteam zu erstellen, während wir die Datenqualität sicherstellen.

 

Um die Demo zu installieren, besorgen Sie sich eine kostenlose Databricks-Arbeitsumgebung und führen Sie die folgenden zwei Befehle in einem Python-Notizbuch aus

Dbdemos ist eine Python-Bibliothek, die vollständige Databricks-Demos in Ihren Arbeitsbereichen installiert. Dbdemos lädt und startet Notebooks, Delta Live Tables Pipelines, Cluster, Databricks SQL Dashboards, Warehouse-Modelle ... Sehen Sie wie man dbdemos verwendet

 

Dbdemos wird als ein GitHub-Projekt verteilt.

Für weitere Details, sehen Sie bitte das GitHub README.md Dokument an und folgen Sie der Dokumentation.
Dbdemos wird so bereitgestellt, wie es ist. Sehen Sie die 
Lizenz und Hinweis für weitere Informationen.
Databricks bietet keine offizielle Unterstützung für dbdemos und die zugehörigen Assets.
Bei Problemen öffnen Sie bitte ein Ticket und das Demo-Team wird sich nach bestem Bemühen darum kümmern. 

Empfohlen

<p>Einheitstests für Delta Live Tables (DLT) für produktionsreife Pipelines</p>

Tutorial

Einheitstests für Delta Live Tables (DLT) für produktionsreife Pipelines

<p>CDC-Pipeline mit Delta Live Tables</p>

Tutorial

CDC-Pipeline mit Delta Live Tables

<p><span><span><span><span><span><span>Delta Lake</span></span></span></span></span></span></p>

Tutorial

Delta Lake

Diese Ressourcen werden in diesen Databricks-Demos installiert:

dlt-loans-dlt-0