Sdílet prostřednictvím

Migrace dat do Delta Lake

  • Článek

Azure Databricks poskytuje nástroje pro zjednodušení migrace dat Parquet a Iceberg do Delta Lake.

Kdy použít CONVERT TO DELTA vs. CLONE

Příkaz SQL CONVERT TO DELTA provede jednorázový místní převod tabulek Parquet a Iceberg na externí tabulky. Viz Převod na Delta Lake.

CLONE podpora pro Parquet a Iceberg rozšiřuje CONVERT TO DELTA funkce tak, aby zahrnovala přírůstkovou podporu pro převod. K vytvoření spravovaných tabulek v Katalogu Unity můžete použít DEEP CLONE. Viz Přírůstkové klonování tabulek Parquet a Iceberg do Delta Lake.

Databricks doporučuje ukládat data pomocí spravovaných tabulek Unity Catalog, ale místní převod nabízí řadu stejných výhod, aniž by bylo nutné plně přepsat všechna data. Databricks doporučuje použít CLONE , pokud zdrojový systém bude během migrace nadále přijímat aktualizace.