Publier des packages sur un canal conda Amazon S3 - Deadline Cloud

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Publier des packages sur un canal conda Amazon S3

Vous pouvez publier des packages conda dans un bucket Amazon Simple Storage Service (Amazon S3) afin AWS que les employés de Deadline Cloud (Deadline Cloud) puissent les installer pour exécuter des tâches. La rattler-build publish commande fonctionne avec Amazon S3 de la même manière qu'avec un canal de système de fichiers local. La commande peut créer une recette et publier le résultat, ou publier un fichier de package que vous avez déjà créé. Dans les deux cas, la commande télécharge le package dans le bucket et indexe le canal en une seule étape.

La rattler-build publish commande s'authentifie à AWS l'aide de la chaîne d'identification standard. Elle utilise donc votre AWS configuration comme n'importe quel AWS outil. Pour plus d'informations sur la configuration des informations d'identification, consultez la section Configuration et paramètres du fichier d'informations d'identification dans le guide de l'utilisateur AWS Command Line Interface (AWS CLI).

Conditions préalables

Avant de publier des packages sur Amazon S3, remplissez les conditions préalables suivantes :

  • pixi et rattler-build — Installez pixi depuis pixi.sh, puis installez-le. rattler-build

    pixi global install rattler-build
  • git — Nécessaire pour cloner le dépôt d'échantillons. WindowsActivé, git for fournit Windows également un bash shell, ce dont certains Windows exemples de recettes ont besoin.

  • Compartiment Amazon S3 : compartiment Amazon S3 à utiliser comme canal conda. Vous pouvez utiliser le compartiment des pièces jointes à des tâches de votre ferme Deadline Cloud ou créer un compartiment distinct.

  • AWS informations d'identification — Configurez les informations d'identification sur votre poste de travail à l'aide de la aws configure commande ou de la aws login commande. Pour plus d'informations, consultez Configuration de AWS CLI dans le Guide de l'utilisateur AWS Command Line Interface .

  • Autorisations IAM — (Facultatif) Pour réduire l'étendue des autorisations dont disposent vos informations d'identification, vous pouvez utiliser une politique Gestion des identités et des accès AWS (IAM) qui n'accorde que les autorisations suivantes sur le compartiment Amazon S3 et le préfixe de canal que vous utilisez (par exemple,) : /Conda/*

    • s3:GetObject

    • s3:PutObject

    • s3:DeleteObject

    • s3:ListBucket

    • s3:GetBucketLocation

Publication d'un package sur un canal Amazon S3

À utiliser rattler-build publish avec une s3:// cible pour publier un package sur votre canal conda Amazon S3. Si le canal n'existe pas dans le compartiment, rattler-build initialise le canal automatiquement. Avant de commencer, assurez-vous d'avoir rempli les prérequis.

L'exemple suivant publie l'exemple de recette Blender 4.5 à partir du référentiel d'échantillons de Deadline Cloud surGitHub. Vous pouvez remplacer une recette différente depuis le référentiel d'échantillons ou utiliser votre propre recette.

Pour publier un package sur un canal Amazon S3
  1. Clonez le référentiel d'échantillons de Deadline Cloud.

    git clone https://github.com/aws-deadline/deadline-cloud-samples.git
  2. Passez au répertoire conda_recipes.

    cd deadline-cloud-samples/conda_recipes
  3. Exécutez la commande suivante. amzn-s3-demo-bucketRemplacez-le par le nom de votre compartiment.

    LinuxActivé macOS et exécutez la commande suivante.

    rattler-build publish blender-4.5/recipe/recipe.yaml \ --to s3://amzn-s3-demo-bucket/Conda/Default

    Sur Windows (cmd), exécutez la commande suivante.

    rattler-build publish blender-4.5/recipe/recipe.yaml ^ --to s3://amzn-s3-demo-bucket/Conda/Default

    Le /Conda/Default préfixe organise le canal au sein du bucket. Vous pouvez utiliser un préfixe différent, mais celui-ci doit être cohérent dans toutes les commandes et configurations de file d'attente qui font référence au canal.

Pour reconstruire et publier un package mis à jour, ajoutez-le --build-number=+1 pour incrémenter automatiquement le numéro de version.

rattler-build publish blender-4.5/recipe/recipe.yaml \ --to s3://amzn-s3-demo-bucket/Conda/Default \ --build-number=+1

Si la recette de votre package dépend de packages provenant d'un canal particulier, tel que conda-forge, ajoutez-le -c conda-forge à la commande.

Vous pouvez également publier un fichier de package que vous avez déjà créé, par exemple un .conda fichier issu d'une version locale. amzn-s3-demo-bucketRemplacez-le par le nom de votre compartiment.

rattler-build publish output/linux-64/blender-4.5.0-hb0f4dca_0.conda \ --to s3://amzn-s3-demo-bucket/Conda/Default

Tester le package

Après avoir publié le package, créez un projet pixi temporaire pour vérifier que le package fonctionne correctement. Le projet installe le package depuis le canal Amazon S3.

Pour tester le package
  1. Créez un répertoire de test temporaire et initialisez un projet pixi avec le canal Amazon S3. amzn-s3-demo-bucketRemplacez-le par le nom de votre compartiment.

    mkdir package-test-env cd package-test-env pixi init --channel s3://amzn-s3-demo-bucket/Conda/Default
  2. Ajoutez le package au projet.

    pixi add blender=4.5
  3. Vérifiez que le package fonctionne correctement.

    pixi run blender --version

Nettoyage

Après le test, supprimez le répertoire du projet de test.

Pour nettoyer les ressources de test
  • Supprimez le répertoire du projet de test.

    LinuxActivé macOS et exécutez la commande suivante.

    rm -rf package-test-env

    Sur Windows (cmd), exécutez la commande suivante.

    rmdir /s /q package-test-env

Débogage des versions

En cas d'échec d'une compilation, rattler-build préserve le répertoire de compilation afin que vous puissiez l'examiner. Exécutez la commande suivante pour ouvrir un shell interactif dans l'environnement de construction avec toutes les variables d'environnement configurées telles qu'elles étaient lors de la génération.

rattler-build debug shell

À partir du shell de débogage, vous pouvez modifier des fichiers, exécuter des commandes de compilation individuelles et ajouter des dépendances pour isoler le problème. Pour plus d'informations, consultez la section Débogage des versions dans la documentation de Rattler-build.

Création de packages pour d'autres plateformes

La rattler-build publish commande crée des packages pour le système d'exploitation du poste de travail sur lequel elle est exécutée. Si votre flotte Deadline Cloud utilise un système d'exploitation différent de celui de votre poste de travail, ou si votre package a d'autres exigences en matière d'hôte, vous disposez des options suivantes :

  • Exécutez rattler-build publish sur un hôte correspondant au système d'exploitation cible. Par exemple, utilisez une instance Amazon Elastic Compute Cloud (Amazon EC2) Linux exécutée pour créer des packages pour une flotte. Linux

  • Utilisez une file d'attente de création de packages Deadline Cloud pour automatiser les builds sur la plateforme cible. Voir Création d'une file d'attente pour la création de packages.

  • (Avancé) Utilisez la compilation croisée pour créer des packages pour une plate-forme différente de celle de votre poste de travail. Pour plus d'informations, consultez la section Compilation croisée dans la documentation de Rattler-build.

Étapes suivantes

Après avoir publié des packages sur votre canal Amazon S3 Conda, configurez vos files d'attente Deadline Cloud pour utiliser le canal :