Delta Lake 3.0: ユニフォームとリキッドクラスタリング
動画の内容
この短いデモンストレーションでは、Delta Lake 3.0の主な機能を初めてご覧いただきます。
ユニバーサルフォーマット
Delta Universal Format(UniForm)は、アプリケーションが必要とする形式でDeltaを読み取ることを可能にし、互換性を向上させ、エコシステムを拡大します。Deltaは、Apache IcebergまたはApache Hudiに必要なメタデータを自動的に生成するため、ユーザーは形式間で選択したり、手動で変換したりする必要がありません。UniFormを使用すると、Deltaはエコシステム全体で機能す るユニバーサルフォーマットになります。
リキッドクラスタリング
Liquid Clusteringは、Deltaテーブルのためのスマートなデータ管理手法です。それは柔軟で、クラスタリングキーに基づいてデータレイアウトを自動的に調整します。Liquid Clusteringは、データパターンに基づいて動的にデータをクラスタリングし、Hiveのパーティショニングで発生する過剰または不足のパーティショニング問題を回避するのに役立ちます。