了解資料傳輸效能計數器 - AWS DataSync

本文為英文版的機器翻譯版本，如內容有任何歧義或不一致之處，概以英文版為準。

了解資料傳輸效能計數器

當您啟動任務時， AWS DataSync 會提供計數器，以協助追蹤資料傳輸的效能和進度。

使用以下資訊來了解每個計數器代表什麼。您可以在 DataSync 主控台或 DescribeTaskExecution 回應中檢視這些計數器。有些計數器不適用於每個任務模式。

主控台 DescribeTaskExecution 任務模式支援 Description

–

BytesWritten

增強型、基本型

DataSync 實際寫入目的地位置的邏輯位元組數。

資料輸送量

–

增強型、基本型

DataSync 將邏輯位元組寫入目的地位置的速率。

如果您使用的是 DescribeTaskExecution，計算此計數器的方式取決於您的任務模式：

  • 增強型模式：除BytesWritten以 TotalDuration

  • 基本模式：除BytesWritten以 TransferDuration
傳輸的資料

BytesTransferred

增強型、基本型

DataSync 在壓縮之前傳送到網路的位元組數 （如果可以壓縮）。

如需透過網路傳輸的位元組數，請參閱網路輸送量 （在主控台中） 或 BytesCompressed（在 DescribeTaskExecution 中） 計數器。

從目的地刪除

FilesDeleted

基本

DataSync 在您目的地位置中實際刪除的檔案、物件和目錄數量。

如果您未設定任務來刪除目的地中不在來源中的資料：

  • 從目的地刪除不會在主控台中顯示。

  • FilesDeleted 一律會顯示 的值0。

從目的地刪除

FilesDeleted, FoldersDeleted

增強型

DataSync 在您的目的地位置實際刪除的檔案或物件數量，以及目錄。

如果您未將任務設定為刪除目的地中不在來源中的資料：

  • 從目的地刪除不會在主控台中顯示。

  • FilesDeleted 和 FoldersDeleted一律會顯示 的值0。

–

EstimatedBytesToTransfer

 增強型、基本型

DataSync 預期寫入目的地位置的邏輯位元組數。

–

EstimatedFilesToDelete

 基本

DataSync 預期在您的目的地位置刪除的檔案、物件和目錄數量。

如果您未設定任務來刪除目的地中不在來源中的資料，則值一律為 0。

–

EstimatedFilesToDelete, EstimatedFoldersToDelete

增強型

DataSync 預期在您的目的地位置刪除的檔案或物件數量，以及目錄。

如果您未將任務設定為刪除不在來源的目的地中的資料，則值一律為 0。

–

EstimatedFilesToTransfer

基本

DataSync 預期透過網路傳輸的檔案、物件和目錄數量。此值會在 DataSync 準備傳輸時計算。

計算方式主要取決於您使用的傳輸模式：

  • 如果傳輸模式設定為僅傳輸已變更的資料：計算是根據比較來源和目的地位置的內容，並判斷需要傳輸的差異。差異可能包括：

  • 如果傳輸模式設定為傳輸所有資料：計算僅根據 DataSync 在來源位置找到的項目。

–

EstimatedFilesToTransfer, EstimatedFoldersToTransfer

增強型

DataSync 預期透過網路傳輸的檔案或物件數量，以及目錄。此值會在 DataSync 準備傳輸時計算。

計算方式主要取決於您使用的傳輸模式：

  • 如果傳輸模式設定為僅傳輸已變更的資料：計算是根據比較來源和目的地位置的內容，並判斷需要傳輸的差異。差異可能包括：

    • 在來源位置新增或修改的任何項目。

    • 初始傳輸後，位於兩個位置且於目的地修改的任何項目 （除非您將任務設定為不會覆寫目的地中的資料)。

  • 如果傳輸模式設定為傳輸所有資料：計算僅根據 DataSync 在來源位置找到的項目。

檔案輸送量

–

增強型、基本型

DataSync 透過網路傳輸檔案、物件和目錄的速率。

如果您使用的是 DescribeTaskExecution，計算此計數器的方式取決於您的任務模式：

  • 增強型模式：除FilesTransferred以 TotalDuration

  • 基本模式：除FilesTransferred以 TransferDuration

–

FilesFailed, FoldersFailed

增強型

DataSync 在任務執行期間無法準備、傳輸、驗證和刪除的檔案或物件數量，以及目錄。

如果有失敗，您可以分別在目的地主控台計數器的已準備、已轉移、已略過和已刪除旁邊看到這些失敗。

列於來源

FilesListed.AtSource, FoldersListed.AtSource

增強型

DataSync 在您的來源位置找到的檔案或物件數量，以及目錄。

  • 使用資訊清單時，DataSync 只會列出資訊清單中的內容 （而不是來源位置中的所有內容）。

  • 使用包含篩選條件時，DataSync 只會列出符合您來源位置篩選條件的項目。

  • 使用排除篩選條件時，DataSync 會在套用篩選條件之前列出來源位置的所有內容。

–

FilesListed.AtDestinationForDelete, FoldersListed.AtDestinationForDelete

增強型

DataSync 在您的目的地位置找到的檔案或物件數量，以及目錄。

只有在您將任務設定為刪除不在來源的目的地中的資料時，此計數器才適用。

網路輸送量*

BytesCompressed

增強型、基本型

DataSync 在壓縮後透過網路傳輸的實體位元組數 （如果可以壓縮）。

除非資料無法壓縮，否則此數字通常小於傳輸的資料 （在主控台中） 或 BytesTransferred（在 DescribeTaskExecution 中）。

* 對於增強型模式，網路輸送量不會顯示在主控台中。

壓縮百分比

–

增強型、基本型

DataSync 透過網路傳送資料之前壓縮的傳輸資料百分比。

如果您使用的是 DescribeTaskExecution，您可以使用 計算此計數器1 - BytesCompressed / BytesWritten。

已準備

FilesPrepared, FoldersPrepared

增強型

比較來源和目的地位置後，DataSync 將嘗試傳輸的檔案或物件數量，以及目錄。

在 主控台中，此計數器也可以顯示 DataSync 在準備期間略過的物件數量。如需詳細資訊，請參閱DataSync 如何準備資料傳輸。

如果您將任務設定為傳輸所有資料，則此計數器不適用。在這種情況下，DataSync 會將來源的所有內容複製到目的地，而不會比較位置之間的差異。

處理速率

–

增強型、基本型

DataSync 讀取來源位置的檔案、物件和目錄的速率。

處理速率是以數個 CloudWatch 指標為基礎。確切的指標取決於您使用的任務模式。

增強型模式：

  • FilesListedSource

  • FilesPrepared

  • FilesTransferred

  • FilesVerified

基本模式：

  • FilesPreparedSource

  • FilesPreparedDestination

  • FilesTransferred

  • FilesVerifiedSource

  • FilesVerifiedDestination

剩餘

–

基本

DataSync 預期透過網路傳輸的檔案、物件和目錄的剩餘數量。

如果您使用的是 DescribeTaskExecution，您可以從 中減去 FilesTransferred 來計算此計數器EstimatedFilesToTransfer。

已略過*

FilesSkipped

 基本

DataSync 在傳輸期間略過的檔案、物件和目錄數量。

–

FilesSkipped, FoldersSkipped

增強型

DataSync 在傳輸期間略過的檔案或物件數量，以及目錄。

僅傳輸已變更的資料時，已略過的項目會包含在已準備計數器中，或在傳輸所有資料時包含在已轉移計數器中。 傳輸模式選項

已轉移

FilesTransferred

基本

DataSync 透過網路傳輸的檔案、物件和目錄數量。當您的任務執行期間，從來源讀取物件並透過網路傳送時，此值會定期更新。

如果 DataSync 無法傳輸某些內容，則此值可以小於 EstimatedFilesToTransfer或 EstimatedFoldersToTransfer。在某些情況下，此值也可以大於 EstimatedFilesToTransfer或 EstimatedFoldersToTransfer。此計數器對於某些位置類型是特定的實作，因此請不要將其用作正在傳輸的內容或監控任務執行的確切指示。

已轉移

FilesTransferred, FoldersTransferred

增強型

DataSync 透過網路傳輸的檔案或物件數量，以及目錄。當您的任務執行期間，從來源讀取物件並透過網路傳送時，此值會定期更新。

如果 DataSync 無法傳輸某些內容，則此值可以小於 EstimatedFilesToTransfer或 EstimatedFoldersToTransfer。在某些情況下，此值也可以大於 EstimatedFilesToTransfer或 EstimatedFoldersToTransfer。此計數器對於某些位置類型是特定的實作，因此請不要將其用作正在傳輸的內容或監控任務執行的確切指示。

已驗證

FilesVerified

基本

DataSync 在您傳輸期間驗證的檔案、物件和目錄數量。

當您將任務設定為僅驗證傳輸的資料時，DataSync 在某些情況下不會驗證目錄，或無法傳輸的檔案或物件。

已驗證

FilesVerified, FoldersVerified

增強型

DataSync 在您傳輸期間驗證的檔案或物件數量，以及目錄。