データ転送のタスクモードの選択 - AWS DataSync

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

データ転送のタスクモードの選択

AWS DataSync タスクは、次のいずれかのモードで実行できます。

  • 拡張モード – ベーシックモードよりも高いパフォーマンスのファイルまたはオブジェクトを事実上無制限に転送します。拡張モードタスクは、データの一覧表示、準備、転送、検証を並行して行うことで、データ転送プロセスを最適化します。拡張モードは現在、Amazon S3 ロケーション間の転送、エージェントなしで Azure Blobと Amazon S3 間の転送、エージェントなしで他のクラウドと Amazon S3 間の転送、拡張モードエージェントを使用した NFS または SMB ファイルサーバーと Amazon S3 間の転送に使用できます。

  • 基本モード – AWS ストレージと他のサポートされているすべての DataSync ロケーション間でファイルまたはオブジェクトを転送します。基本モードタスクは、データセット内のファイル、オブジェクト、ディレクトリの数に対するクォータの対象となります。基本モードはデータの準備、転送、検証を順に実行するため、ほとんどのワークロードで拡張モードよりも速度は遅くなります。

タスクモードの違いを理解する

次の情報は、使用するタスクモードを決定するのに役立ちます。

機能 拡張モードの動作 基本モードの動作
パフォーマンス DataSync は、データの一覧表示、準備、転送、検証を並行して実行します。ほとんどのワークロード (大規模なオブジェクトの転送など) で基本モードよりも高いパフォーマンスを発揮します DataSync は、データの準備、転送、検証を順に実行します。ほとんどのワークロードで、拡張モードよりもパフォーマンスが低くなります
DataSync がタスク実行ごとに操作できるデータセット内の項目の数

事実上無制限のオブジェクト数

クォータが適用される

データ転送のカウンターメトリクス

DataSync がソースロケーションで検出したオブジェクトの数、各タスクの実行中に準備されるオブジェクトの数、ファイルカウンターやオブジェクトカウンターに似たフォルダカウンターなど、ベーシックモードよりも多くのカウンターとメトリクス

拡張モードよりも少ないカウンターとメトリクス

ログ記録

構造化ログ (JSON 形式) 非構造化ログ

サポートされている場所

現在、Amazon S3 ロケーション間の転送、エージェントなしの Azure Blob と Amazon S3 間の転送、エージェントなしの他のクラウドと Amazon S3 間の転送、拡張モードエージェントを使用した NFS または SMB ファイルサーバーと Amazon S3 間の転送の場合。

DataSync がサポートするすべての場所間の転送に使用可能

データ検証オプション

DataSync は転送されたデータのみを検証します DataSync はデフォルトですべてのデータを検証します
帯域幅の制限 該当しない サポート
Cost 詳細については、「AWS DataSync の料金」ページを参照してください。 詳細については、「AWS DataSync の料金」ページを参照してください。
サポートされていないオブジェクトタグの障害の処理 オブジェクトのタグ付けをサポートしていない場所とのクラウドストレージ転送の場合、ObjectTags オプションが指定されていないか、PRESERVE に設定されている場合、タスクの実行は即座に失敗します。 オブジェクトのタグ付けをサポートしていない場所とのクラウドストレージ転送の場合、タスクの実行は正常に実行されますが、ObjectTags オプションが指定されていない場合、または PRESERVE に設定されている場合、タグ付けされたオブジェクトのオブジェクトごとの障害が報告されます。

タスクモードの選択

拡張モードは、Amazon S3 ロケーション間の転送、エージェントなしで Azure Blobと Amazon S3 間の転送、エージェントなしで他のクラウドと Amazon S3 間の転送、拡張モードエージェントを使用した NFS または SMB ファイルサーバーと Amazon S3 間の転送にのみ選択できます。それ以外の場合は、基本モードを使用する必要があります。たとえば、オンプレミスの HDFS ロケーションから S3 ロケーションへの転送には、ベーシックモードが必要です。

タスクのオプションとパフォーマンスは、選択したタスクモードによって異なる場合があります。タスクを作成すると、タスクモードを変更することはできません。

必要なアクセス許可

拡張モードタスクを作成するには、DataSync を使用している IAM ロールに iam:CreateServiceLinkedRole アクセス許可が必要です。

DataSync ユーザーのアクセス許可については、AWSDataSyncFullAccess の使用を検討してください。これは、ユーザーに DataSync へのフルアクセスと依存関係への最小限のアクセスを提供する AWS マネージドポリシーです。

  1. https://console.aws.amazon.com/datasync/ で AWS DataSync コンソールを開きます。

  2. 左側のナビゲーションペインで [データ転送] を展開し、[タスク][タスクの作成] の順に選択します。

  3. タスクのソースと送信先の場所を設定します。

    詳細については、AWS DataSyncのデータはどこに転送できますか?を参照してください。

  4. タスクモードでは、以下のいずれかのオプションを選択します。

    • 拡張

    • ベーシック

    詳細については、「タスクモードの違いを理解する」を参照してください。

  5. [設定の構成] ページにいる間、別のタスクオプションを選択するか、デフォルト設定を使用してください。

    オプションは以下のとおりです。

    終了したら、[次へ] を選択します。

  6. タスク構成を確認し、[Create task] を選択します。

  1. AWS CLI 設定で、データ転送する AWS リージョン 予定の のいずれかを使用していることを確認してください。

  2. 次の create-task コマンドをコピーします。

    aws datasync create-task \ --source-location-arn "arn:aws:datasync:us-east-1:account-id:location/location-id" \ --destination-location-arn "arn:aws:datasync:us-east-1:account-id:location/location-id" \ --task-mode "ENHANCED-or-BASIC"
  3. --source-location-arn パラメータには、ソースの場所の Amazon リソースネーム (ARN) を指定します。

  4. --destination-location-arn には、転送先の場所の ARN を指定します。

    AWS リージョン または アカウント間で転送する場合は、ARN に他のリージョンまたはアカウント ID が含まれていることを確認してください。

  5. --task-mode には ENHANCED または BASIC を指定します。

    詳細については、「タスクモードの違いを理解する」を参照してください。

  6. 必要に応じて、他のタスクオプションを指定してください。オプションは以下のとおりです。

    その他のオプションについては、「create-task」を参照してください。以下は、拡張モードとその他のいくつかのオプションを指定する create-task コマンドの例です。

    aws datasync create-task \ --source-location-arn "arn:aws:datasync:us-east-1:account-id:location/location-id" \ --destination-location-arn "arn:aws:datasync:us-east-1:account-id:location/location-id" \ --name "task-name" \ --task-mode "ENHANCED" \ --options TransferMode=CHANGED,VerifyMode=ONLY_FILES_TRANSFERRED,ObjectTags=PRESERVE,LogLevel=TRANSFER
  7. create-task コマンドを実行します。

    コマンドが成功すると、作成した場所の ARN を示す応答が返されます。例えば、次のようになります。

    { "TaskArn": "arn:aws:datasync:us-east-1:111222333444:task/task-08de6e6697796f026" }

CreateTask オペレーションで TaskMode パラメータを設定することで DataSync タスクモードを指定できます。