本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
完整資料遷移
完整資料遷移會重新建立資料檔案和中繼資料。相較於就地遷移,此方法需要更長的時間,並且需要額外的運算資源。不過,完整資料遷移提供許多改善資料表品質的機會,並最佳化資料儲存和存取模式。
在完整資料遷移期間,您可以執行數個有益的操作,例如確保完整性和正確性的資料驗證、更符合目前需求的結構描述修改,以及改善查詢效能的分割區策略調整。您也可以重新排序資料以最佳化常見存取模式、實作 Iceberg 隱藏分割以提高查詢效率,並視需要執行檔案格式轉換 (例如,從 CSV 轉換到 Parquet)。
這些功能讓完整資料遷移非常適合轉換為 Iceberg 格式,以及全面精簡和最佳化資料儲存策略。雖然完整資料遷移需要更多時間和資源,但資料品質、組織和查詢效能的改善可以提供長期利益。若要實作完整資料遷移,請使用下列其中一個選項: