Configuration des transferts avec Microsoft Azure Blob Storage

Pour télécharger et préparer votre agent

1. Ouvrez la AWS DataSync console à l'adresse https://console.aws.amazon.com/datasync/.

2. Dans le volet de navigation de gauche, choisissez Agents, puis Create agent.

3. Pour Hypervisor, choisissez Microsoft Hyper-V, puis choisissez Télécharger l'image.

   L'agent télécharge dans un .zip fichier contenant un .vhdx fichier.

4. Extrayez le .vhdx fichier sur votre machine locale.

5. Ouvrez l'PowerShell et procédez comme suit :

   1. Copiez l'Convert-VHDapplet de commande suivante :

      Convert-VHD -Path .\local-path-to-vhdx-file\aws-datasync-2.0.1686143940.1-x86_64.xfs.gpt.vhdx `
      -DestinationPath .\local-path-to-vhdx-file\aws-datasync-2016861439401-x86_64.vhd -VHDType Fixed

   2. Remplacez chaque instance local-path-to-vhdx-file de par l'emplacement du .vhdx fichier sur votre ordinateur local.

   3. Exécutez la commande .

   Votre agent est désormais un VHD de taille fixe (avec un format de .vhd fichier) prêt à être déployé. Azure

Pour déployer votre agent dans Azure

1. DansPowerShell, accédez au répertoire qui contient le .vhd fichier de votre agent.

2. Exécutez la ls commande et enregistrez la Length valeur (par exemple,85899346432).

   Il s'agit de la taille de l'image de votre agent en octets, dont vous avez besoin pour créer un disque géré pouvant contenir l'image.

3. Procédez comme suit pour créer un disque géré :

   1. Copiez la commande Azure CLI suivante :

      az disk create -n your-managed-disk `
      -g your-resource-group `
      -l your-azure-region `
      --upload-type Upload `
      --upload-size-bytes agent-size-bytes `
      --sku standard_lrs

   2. your-managed-diskRemplacez-le par le nom de votre disque géré.

   3. your-resource-groupRemplacez-le par le nom du groupe de Azure ressources auquel appartient votre compte de stockage.

   4. Remplacez your-azure-region par la Azure région où se trouve votre groupe de ressources.

   5. Remplacez agent-size-bytes par la taille de l'image de votre agent.

   6. Exécutez la commande .

   Cette commande crée un disque géré vide avec un SKU standard sur lequel vous pouvez télécharger votre DataSync agent.

4. Pour générer une signature d'accès partagé (SAS) qui autorise l'accès en écriture au disque géré, procédez comme suit :

   1. Copiez la commande Azure CLI suivante :

      az disk grant-access -n your-managed-disk `
      -g your-resource-group `
      --access-level Write `
      --duration-in-seconds 86400

   2. your-managed-diskRemplacez-le par le nom du disque géré que vous avez créé.

   3. your-resource-groupRemplacez-le par le nom du groupe de Azure ressources auquel appartient votre compte de stockage.

   4. Exécutez la commande .

      Dans le résultat, prenez note de l'URI SAS. Vous avez besoin de cette URI pour télécharger l'agent versAzure.

   Le SAS vous permet d'écrire sur le disque pendant une heure maximum. Cela signifie que vous avez une heure pour télécharger votre agent sur le disque géré.

5. Pour télécharger votre agent sur votre disque géréAzure, procédez comme suit :

   1. Copiez la AzCopy commande suivante :

      .\azcopy copy local-path-to-vhd-file sas-uri --blob-type PageBlob

   2. Remplacez local-path-to-vhd-file par l'emplacement du .vhd fichier de l'agent sur votre ordinateur local.

   3. sas-uriRemplacez-le par l'URI SAS que vous avez obtenu lorsque vous avez exécuté la az disk grant-access commande.

   4. Exécutez la commande .

6. Lorsque le téléchargement de l'agent est terminé, révoquez l'accès à votre disque géré. Pour ce faire, copiez la commande Azure CLI suivante :

   az disk revoke-access -n your-managed-disk -g your-resource-group

   1. your-resource-groupRemplacez-le par le nom du groupe de Azure ressources auquel appartient votre compte de stockage.

   2. your-managed-diskRemplacez-le par le nom du disque géré que vous avez créé.

   3. Exécutez la commande .

7. Procédez comme suit pour associer votre disque géré à une nouvelle Linux machine virtuelle :

   1. Copiez la commande Azure CLI suivante :

      az vm create --resource-group your-resource-group `
      --location eastus `
      --name your-agent-vm `
      --size Standard_E4as_v4 `
      --os-type linux `
      --attach-os-disk your-managed-disk

   2. your-resource-groupRemplacez-le par le nom du groupe de Azure ressources auquel appartient votre compte de stockage.

   3. your-agent-vmRemplacez-le par un nom de machine virtuelle dont vous vous souviendrez.

   4. your-managed-diskRemplacez-le par le nom du disque géré que vous connectez à la machine virtuelle.

   5. Exécutez la commande .

Pour obtenir la clé d'activation de votre agent

1. Sur le Azure portail, activez les diagnostics de démarrage de la machine virtuelle pour votre agent en choisissant le paramètre Activer avec un compte de stockage personnalisé et en spécifiant votre compte Azure de stockage.

   Après avoir activé les diagnostics de démarrage pour la machine virtuelle de votre agent, vous pouvez accéder à la console locale de votre agent pour obtenir la clé d'activation.

2. Pendant que vous êtes toujours sur le Azure portail, accédez à votre machine virtuelle et choisissez Serial console.

3. Dans la console locale de l'agent, connectez-vous à l'aide des informations d'identification par défaut suivantes :

   • Nom d'utilisateur – admin

   • Mot de passe — password

   Nous vous recommandons de modifier au moins le mot de passe de l'agent à un moment donné. Dans la console locale de l'agent, entrez dans 5 le menu principal, puis utilisez la passwd commande pour modifier le mot de passe.

4. Entrez 0 pour obtenir la clé d'activation de l'agent.

5. Entrez l' Région AWS endroit où vous utilisez DataSync (par exemple,us-east-1).

6. Choisissez le point de terminaison de service que l'agent utilisera pour se connecter AWS.

7. Enregistrez la valeur de la Activation key sortie.

Pour activer votre agent

1. Ouvrez la AWS DataSync console à l'adresse https://console.aws.amazon.com/datasync/.

2. Dans le volet de navigation de gauche, choisissez Agents, puis Create agent.

3. Pour Hypervisor, choisissez Microsoft Hyper-V.

4. Pour le type de point de terminaison, choisissez le même type de point de terminaison de service que celui que vous avez spécifié lorsque vous avez obtenu la clé d'activation de votre agent (par exemple, choisissez Points de terminaison de service public dans Region name).

5. Configurez votre réseau pour qu'il fonctionne avec le type de point de terminaison de service utilisé par votre agent. Pour connaître les exigences du réseau des points de terminaison de service, consultez les rubriques suivantes :

   • Points de terminaison d'un VPC

   • Points de terminaison publics

   • Points de terminaison FIPS (Federal Information Processing Standard)

6. Pour la clé d'activation, procédez comme suit :

   1. Choisissez Entrez manuellement la clé d'activation de votre agent.

   2. Entrez la clé d'activation que vous avez reçue de la console locale de l'agent.

7. Choisissez Create agent (Créer un agent).

Pour créer un EC2 agent Amazon

1. Déployez un EC2 agent Amazon.

2. Choisissez un point de terminaison de service avec lequel l'agent communique AWS.

   Dans ce cas, nous vous recommandons d'utiliser un point de terminaison de service de cloud privé virtuel (VPC).

3. Configurez votre réseau pour qu'il fonctionne avec les points de terminaison du service VPC.

4. Activez l'agent.

1. Ouvrez la AWS DataSync console à l'adresse https://console.aws.amazon.com/datasync/.

2. Dans le volet de navigation de gauche, développez Transfert de données, puis choisissez Locations et Create location.

3. Pour Location type (Type d'emplacement), choisissez Microsoft Azure Blob Storage.

4. Pour URL du conteneur, entrez l'URL du conteneur impliqué dans votre transfert.

5. (Facultatif) Pour le niveau d'accès lorsqu'il est utilisé comme destination, choisissez le niveau d'accès vers lequel vous souhaitez transférer vos objets ou fichiers.

6. Pour Dossier, entrez des segments de chemin si vous souhaitez limiter votre transfert vers un répertoire virtuel de votre conteneur (par exemple,/my/images).

7. Si votre transfert nécessite un agent, choisissez Utiliser des agents, puis choisissez l' DataSync agent qui peut se connecter à votre Azure Blob Storage conteneur.

8. Pour le jeton SAS, fournissez les informations d'identification nécessaires DataSync pour accéder à votre stockage blob. Certains ensembles de données publics sur le stockage Azure Blob ne nécessitent pas d'informations d'identification. Vous pouvez saisir directement un jeton SAS ou spécifier un AWS Secrets Manager secret contenant le jeton. Pour plus d'informations, consultez la section Fourniture d'informations d'identification pour les emplacements de stockage.

   Votre jeton SAS fait partie de la chaîne d'URI SAS qui suit l'URI de votre ressource de stockage et un point d'interrogation (?). Un jeton ressemble à ceci :

   sp=r&st=2023-12-20T14:54:52Z&se=2023-12-20T22:54:52Z&spr=https&sv=2021-06-08&sr=c&sig=aBBKDWQvyuVcTPH9EBp%2FXTI9E%2F%2Fmq171%2BZU178wcwqU%3D

9. (Facultatif) Entrez des valeurs pour les champs Clé et Valeur afin de baliser l'emplacement.

   Les balises vous aident à gérer, filtrer et rechercher vos AWS ressources. Nous vous recommandons de créer au moins une balise de nom pour votre emplacement.

10. Choisissez Créer un emplacement.

1. Copiez la create-location-azure-blob commande suivante :

   aws datasync create-location-azure-blob \
     --container-url "https://path/to/container" \
     --authentication-type "SAS" \
     --sas-configuration '{
         "Token": "your-sas-token"
       }' \
     --agent-arns my-datasync-agent-arn \
     --subdirectory "/path/to/my/data" \
     --access-tier "access-tier-for-destination" \
     --tags [{"Key": "key1","Value": "value1"}]

2. Pour le --container-url paramètre, spécifiez l'URL du Azure Blob Storage conteneur impliqué dans votre transfert.

3. Pour le paramètre --authentication-type, spécifiez SAS. Si vous accédez à un ensemble de données public qui ne nécessite pas d'authentification, spécifiezNONE.

4. Pour l'Tokenoption du --sas-configuration paramètre, spécifiez le jeton SAS qui permet d'accéder DataSync à votre stockage blob.

   Vous pouvez également fournir des paramètres supplémentaires pour sécuriser vos clés à l'aide de AWS Secrets Manager. Pour plus d'informations, consultez la section Fourniture d'informations d'identification pour les emplacements de stockage.

   Votre jeton SAS fait partie de la chaîne d'URI SAS qui suit l'URI de votre ressource de stockage et un point d'interrogation (?). Un jeton ressemble à ceci :

   sp=r&st=2023-12-20T14:54:52Z&se=2023-12-20T22:54:52Z&spr=https&sv=2021-06-08&sr=c&sig=aBBKDWQvyuVcTPH9EBp%2FXTI9E%2F%2Fmq171%2BZU178wcwqU%3D

5. (Facultatif) Pour le --agent-arns paramètre, spécifiez le nom de ressource Amazon (ARN) de l' DataSync agent qui peut se connecter à votre conteneur.

   Voici un exemple d'ARN d'agent : arn:aws:datasync:us-east-1:123456789012:agent/agent-01234567890aaabfb

   Vous pouvez spécifier plusieurs agents. Pour de plus amples informations, veuillez consulter Utilisation de plusieurs DataSync agents.

6. Pour le --subdirectory paramètre, spécifiez les segments de chemin si vous souhaitez limiter votre transfert vers un répertoire virtuel de votre conteneur (par exemple,/my/images).

7. (Facultatif) Pour le --access-tier paramètre, spécifiez le niveau d'accès (HOTCOOL, ouARCHIVE) vers lequel vous souhaitez transférer vos objets ou fichiers.

   Ce paramètre s'applique uniquement lorsque vous utilisez cet emplacement comme destination de transfert.

8. (Facultatif) Pour le --tags paramètre, spécifiez des paires clé-valeur qui peuvent vous aider à gérer, filtrer et rechercher votre position.

   Nous vous recommandons de créer une balise de nom pour votre emplacement.

9. Exécutez la commande create-location-azure-blob.

   Si la commande aboutit, vous obtenez une réponse indiquant l'ARN de l'emplacement que vous avez créé. Par exemple :

   { 
       "LocationArn": "arn:aws:datasync:us-east-1:123456789012:location/loc-12345678abcdefgh" 
   }

1. Ouvrez la AWS DataSync console à l'adresse https://console.aws.amazon.com/datasync/.

2. Dans le volet de navigation de gauche, développez Transfert de données, puis choisissez Locations.

3. Choisissez votre Azure Blob Storage emplacement.

   Vous pouvez consulter les informations relatives à votre position, y compris les tâches de DataSync transfert qui l'utilisent.

1. Copiez la describe-location-azure-blob commande suivante :

   aws datasync describe-location-azure-blob \
     --location-arn "your-azure-blob-location-arn"

2. Pour le --location-arn paramètre, spécifiez l'ARN de l'Azure Blob Storageemplacement que vous avez créé (par exemple,arn:aws:datasync:us-east-1:123456789012:location/loc-12345678abcdefgh).

3. Exécutez la commande describe-location-azure-blob.

   Vous recevez une réponse qui vous indique les détails de votre position. Par exemple :

   {
       "LocationArn": "arn:aws:datasync:us-east-1:123456789012:location/loc-12345678abcdefgh",
       "LocationUri": "azure-blob://my-user.blob.core.windows.net/container-1",
       "AuthenticationType": "SAS",
       "Subdirectory": "/my/images",
       "AgentArns": ["arn:aws:datasync:us-east-1:123456789012:agent/agent-01234567890deadfb"],
   }

1. Copiez la update-location-azure-blob commande suivante :

   aws datasync update-location-azure-blob \
     --location-arn "your-azure-blob-location-arn" \
     --authentication-type "SAS" \
     --sas-configuration '{
         "Token": "your-sas-token"
       }' \
     --agent-arns my-datasync-agent-arn \
     --subdirectory "/path/to/my/data" \
     --access-tier "access-tier-for-destination"

2. Pour le --location-arn paramètre, spécifiez l'ARN de l'Azure Blob Storageemplacement que vous mettez à jour (par exemple,arn:aws:datasync:us-east-1:123456789012:location/loc-12345678abcdefgh).

3. Pour le paramètre --authentication-type, spécifiez SAS.

4. Pour l'Tokenoption du --sas-configuration paramètre, spécifiez le jeton SAS qui permet d'accéder DataSync à votre stockage blob.

   Le jeton fait partie de la chaîne d'URI SAS qui suit l'URI de la ressource de stockage et un point d'interrogation (?). Un jeton ressemble à ceci :

   sp=r&st=2022-12-20T14:54:52Z&se=2022-12-20T22:54:52Z&spr=https&sv=2021-06-08&sr=c&sig=qCBKDWQvyuVcTPH9EBp%2FXTI9E%2F%2Fmq171%2BZU178wcwqU%3D

5. Pour le --agent-arns paramètre, spécifiez l'Amazon Resource Name (ARN) de l' DataSync agent que vous souhaitez connecter à votre conteneur.

   Voici un exemple d'ARN d'agent : arn:aws:datasync:us-east-1:123456789012:agent/agent-01234567890aaabfb

   Vous pouvez spécifier plusieurs agents. Pour de plus amples informations, veuillez consulter Utilisation de plusieurs DataSync agents.

6. Pour le --subdirectory paramètre, spécifiez les segments de chemin si vous souhaitez limiter votre transfert vers un répertoire virtuel de votre conteneur (par exemple,/my/images).

7. (Facultatif) Pour le --access-tier paramètre, spécifiez le niveau d'accès (HOTCOOL, ouARCHIVE) vers lequel vous souhaitez transférer vos objets.

   Ce paramètre s'applique uniquement lorsque vous utilisez cet emplacement comme destination de transfert.