あなたのdbtジョブを組織化し、実行する
動画の内容
dbtは、データをあなたのレイクハウスに変換しロードするための人気のデータフレームワークです。Databricksは、Databricks SQLウェアハウスを使用して本番環境向けのdbtパイプラインを非常に簡単に立ち上げることができます。
このdbtとDatabricksのデモでは、以下の内容をカバーします:
- あなたの顧客データセットを取り込むためのdbtパイプ ラインの構築方法。(私たちは 'lakehouse-retail-c360' デモで利用可能なパイプラインと同じものを構築します)。
- あなたのアイデアからdbtパイプラインを開始する方法。
- そして最終的に、Databricks Workflowsがどのようにdbtタスクを開始して、あなたのプロダクションランをオーケストレーションするか。
注意:このデモでは、あなたのリポジトリ個人フォルダにリポジトリをクローンします。
https://github.com/databricks-demos/dbt-databricks-c360
デモをインストールするには、無料のDatabricksワークスペースを取得し、Pythonノートブックで以下の2つのコマンドを実行します
Dbdemosは、Databricksのデモをワークスペースに完全にインストールするPythonライブラリです。Dbdemosはノートブック、Delta Live Tablesパイプライン、クラスター、Databricks SQLダッシュボード、ウェアハウスモデルなどをロードして開始します。 dbdemosの使い方をご覧ください
DbdemosはGitHubプロジェクトとして配布されています。
詳細については、GitHubのREADME.mdファイルをご覧いただき、ドキュメンテーションに従ってください。
Dbdemosはそのまま提供されます。詳細はライセンスと通知をご覧ください。
Databricksは、dbdemosおよび関連資産に対して公式のサポートを提供していません。
問題が発生した場合は、チケットを開いてデモチームに報告してください。最善を尽くして対応します。