Como entender os contadores de desempenho de transferência de dados - AWS DataSync

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

Como entender os contadores de desempenho de transferência de dados

Quando você inicia uma tarefa, AWS DataSync fornece contadores para ajudar a monitorar o desempenho e o progresso da transferência de dados.

Use as informações a seguir para entender o que cada contador representa. Você pode ver esses contadores no DataSync console ou em uma DescribeTaskExecutionresposta. Alguns contadores não estão disponíveis em todos os modos de tarefa.

Console DescribeTaskExecution Suporte ao modo de tarefa Description

–

BytesWritten

Avançado, Básico

O número de bytes lógicos que DataSync realmente gravam no local de destino.

Throughput total

–

Avançado, Básico

A taxa na qual DataSync grava bytes lógicos no local de destino.

Se você estiver usando DescribeTaskExecution, a forma como você calcula esse contador depende do seu modo de tarefa:

  • Modo Avançado: divida BytesWritten por TotalDuration

  • Modo Básico: divida BytesWritten por TransferDuration
Dados transferidos

BytesTransferred

Avançado, Básico

O número de bytes DataSync enviados para a rede antes da compactação (se a compactação for possível).

Para saber o número de bytes transferidos pela rede, consulte o contador de taxa de transferência de rede (no console) ou BytesCompressed (in DescribeTaskExecution).

Excluído do destino

FilesDeleted

Básico

O número de arquivos, objetos e diretórios que DataSync realmente são excluídos em seu local de destino.

Se você não configurar a tarefa para excluir dados no destino que não estão na origem:

  • Excluído do destino não é exibido no console.

  • FilesDeleted sempre mostra um valor de 0.

Excluído do destino

FilesDeleted, FoldersDeleted

Avançado

O número de arquivos ou objetos e diretórios que DataSync realmente são excluídos em seu local de destino.

Se você não configurar a tarefa para excluir dados no destino que não estão na origem:

  • Excluído do destino não é exibido no console.

  • FilesDeletede FoldersDeleted sempre mostra um valor de0.

–

EstimatedBytesToTransfer

 Avançado, Básico

O número de bytes lógicos que DataSync esperam gravar no local de destino.

–

EstimatedFilesToDelete

 Básico

O número de arquivos, objetos e diretórios que você DataSync espera excluir no local de destino.

Se você não configurar sua tarefa para excluir os dados no destino que não estão na origem, o valor sempre será 0.

–

EstimatedFilesToDelete, EstimatedFoldersToDelete

Avançado

O número de arquivos, objetos e diretórios que você DataSync espera excluir no local de destino.

Se você não configurar sua tarefa para excluir os dados no destino que não estão na origem, o valor sempre será 0.

–

EstimatedFilesToTransfer

Básico

O número de arquivos, objetos e diretórios que DataSync esperam ser transferidos pela rede. Esse valor é calculado enquanto DataSync prepara a transferência.

A forma como isso é calculado depende principalmente do modo de transferência que você está usando:

  • Se o modo de transferência estiver definido para transferir apenas os dados que foram alterados: o cálculo será baseado na comparação do conteúdo dos locais de origem e na diferença e na determinação da diferença que precisa ser transferida. A diferença pode incluir:

    • Tudo o que for adicionado ou modificado no local de origem.

    • Tudo o que estiver nos dois locais e que tenha sido modificado no destino após uma transferência inicial (a menos que você configure a tarefa para não sobrescrever dados no destino).

    • O número de itens que DataSync espera excluir (se você configurar sua tarefa para excluir dados no destino).

  • Se o modo de transferência estiver definido para transferir todos os dados: o cálculo é baseado somente nos itens DataSync encontrados no local de origem.

–

EstimatedFilesToTransfer, EstimatedFoldersToTransfer

Avançado

O número de arquivos ou objetos e diretórios que DataSync esperam ser transferidos pela rede. Esse valor é calculado enquanto DataSync prepara a transferência.

A forma como isso é calculado depende principalmente do modo de transferência que você está usando:

  • Se o modo de transferência estiver definido para transferir apenas os dados que foram alterados: o cálculo será baseado na comparação do conteúdo dos locais de origem e na diferença e na determinação da diferença que precisa ser transferida. A diferença pode incluir:

    • Tudo o que for adicionado ou modificado no local de origem.

    • Tudo o que estiver nos dois locais e que tenha sido modificado no destino após uma transferência inicial (a menos que você configure a tarefa para não sobrescrever dados no destino).

  • Se o modo de transferência estiver definido para transferir todos os dados: o cálculo é baseado somente nos itens DataSync encontrados no local de origem.

Throughput de arquivo

–

Avançado, Básico

A taxa na qual DataSync transfere arquivos, objetos e diretórios pela rede.

Se você estiver usando DescribeTaskExecution, a forma como você calcula esse contador depende do seu modo de tarefa:

  • Modo Avançado: divida FilesTransferred por TotalDuration

  • Modo Básico: divida FilesTransferred por TransferDuration

–

FilesFailed, FoldersFailed

Avançado

O número de arquivos, objetos e diretórios que DataSync falham na preparação, transferência, verificação e exclusão durante a execução da tarefa.

Se houver falhas, você poderá vê-las ao lado dos contadores Preparado, Transferido, Ignorado e Excluído do console de destino, respectivamente.

Listado na fonte

FilesListed.AtSource, FoldersListed.AtSource

Avançado

O número de arquivos ou objetos e diretórios DataSync encontrados no local de origem.

  • Com um manifesto, DataSync lista somente o que está em seu manifesto (e não tudo em seu local de origem).

  • Com um filtro de inclusão, DataSync lista somente o que corresponde ao filtro no local de origem.

  • Com um filtro de exclusão, DataSync lista tudo no local de origem antes de aplicar o filtro.

–

FilesListed.AtDestinationForDelete, FoldersListed.AtDestinationForDelete

Avançado

O número de arquivos ou objetos e diretórios DataSync encontrados no local de destino.

Este contador só se aplicará se você configurar a tarefa para excluir dados no destino que não estejam na origem.

Taxa de transferência da rede *

BytesCompressed

Avançado, Básico

O número de bytes físicos que são DataSync transferidos pela rede após a compactação (se a compactação for possível).

Esse número geralmente é menor que os dados transferidos (no console) ou BytesTransferred (em DescribeTaskExecution), a menos que os dados não sejam compactáveis.

* No modo Avançado, a taxa de transferência da rede não é exibida no console.

Porcentagem compactada

–

Avançado, Básico

A porcentagem de dados de transferência que DataSync foram compactados antes de serem enviados pela rede.

Se você estiver usando DescribeTaskExecution, você pode calcular esse contador com1 - BytesCompressed / BytesWritten.

Preparado

FilesPrepared, FoldersPrepared

Avançado

O número de arquivos, objetos e diretórios que DataSync tentarão ser transferidos após comparar seus locais de origem e destino.

No console, esse contador também pode mostrar o número de objetos que DataSync pulam durante a preparação. Para obter mais informações, consulte Como DataSync prepara sua transferência de dados.

Esse contador não é aplicável se você configurar a tarefa para transferir todos os dados. Nesse cenário, DataSync copia tudo da origem ao destino sem comparar as diferenças entre os locais.

Taxa de processamento

–

Avançado, Básico

A taxa na qual DataSync lê arquivos, objetos e diretórios no local de origem.

A taxa de processamento é baseada em várias CloudWatch métricas. As métricas exatas dependem do modo de tarefa que você está usando.

Modo Avançado:

  • FilesListedSource

  • FilesPrepared

  • FilesTransferred

  • FilesVerified

Modo Básico:

  • FilesPreparedSource

  • FilesPreparedDestination

  • FilesTransferred

  • FilesVerifiedSource

  • FilesVerifiedDestination

Restante

–

Básico

O número restante de arquivos, objetos e diretórios que DataSync esperam ser transferidos pela rede.

Se você estiver usando DescribeTaskExecution, você pode calcular esse contador FilesTransferred subtraindo de. EstimatedFilesToTransfer

Ignorado*

FilesSkipped

 Básico

O número de arquivos, objetos e diretórios que são DataSync ignorados durante a transferência.

–

FilesSkipped, FoldersSkipped

Avançado

O número de arquivos, objetos e diretórios que são DataSync ignorados durante a transferência.

Os itens ignorados são incluídos no contador preparado ao transferir somente os dados que foram alterados ou no contador transferido ao transferir todos os dados.

Transferido

FilesTransferred

Básico

O número de arquivos, objetos e diretórios que são DataSync transferidos pela rede. Esse valor é atualizado periodicamente durante a fase de execução da tarefa, quando algo é lido na fonte e enviado pela rede.

Se DataSync não conseguir transferir algo, esse valor pode ser menor que EstimatedFilesToTransfer ouEstimatedFoldersToTransfer. Em alguns casos, esse valor também pode ser maior que EstimatedFilesToTransfer ouEstimatedFoldersToTransfer. Esse contador é específico da implementação para alguns tipos de local e, portanto, não o use como uma indicação exata do que está sendo transferido ou para monitorar a execução da tarefa.

Transferido

FilesTransferred, FoldersTransferred

Avançado

O número de arquivos ou objetos e diretórios que são DataSync transferidos pela rede. Esse valor é atualizado periodicamente durante a fase de execução da tarefa, quando algo é lido na fonte e enviado pela rede.

Se DataSync não conseguir transferir algo, esse valor pode ser menor que EstimatedFilesToTransfer ouEstimatedFoldersToTransfer. Em alguns casos, esse valor também pode ser maior que EstimatedFilesToTransfer ouEstimatedFoldersToTransfer. Esse contador é específico da implementação para alguns tipos de local e, portanto, não o use como uma indicação exata do que está sendo transferido ou para monitorar a execução da tarefa.

Verificado

FilesVerified

Básico

O número de arquivos, objetos e diretórios que são DataSync verificados durante a transferência.

Quando você configura sua tarefa para verificar somente os dados transferidos, DataSync não verifica diretórios em algumas situações nem arquivos ou objetos que falham na transferência.

Verificado

FilesVerified, FoldersVerified

Avançado

O número de arquivos ou objetos e diretórios que são DataSync verificados durante a transferência.