View a markdown version of this page

Observabilité - Amazon SageMaker AI
Surveillance standard de KubernetesCloudWatch Intégration des journauxHyperPod Observabilité Add-on

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Observabilité

Surveillance standard de Kubernetes

Vous pouvez surveiller Spaces à l'aide d'outils Kubernetes standard tels que kubectl describe et logs. kubectl

Surveillance de l'état de l'espace 

# List all Spaces with status
kubectl get workspace -A

# Get detailed information about a specific Space
kubectl describe workspace <workspace-name>

Affichage des journaux spatiaux 

# View workspace container logs
kubectl logs -l workspace.jupyter.org/workspace-name=<workspace-name> -c workspace

# View SSM agent sidecar logs (for remote IDE connectivity)
kubectl logs -l workspace.jupyter.org/workspace-name=<workspace-name> -c ssm-agent-sidecar

# Follow logs in real-time
kubectl logs -l workspace.jupyter.org/workspace-name=<workspace-name> -c workspace -f

Comprendre les conditions de l'espace

L'état des espaces indique quatre types de conditions :

  • Disponible  : True lorsque l'espace est prêt à être utilisé. Toutes les ressources requises (pods, services, stockage) fonctionnent et fonctionnent correctement.

  • En cours  : True lors de la création, de la mise à jour ou de la réconciliation de l'Espace. Transitions vers False une fois stable.

  • Dégradé  : True lorsque des erreurs sont détectées avec les ressources spatiales. Consultez le message de condition pour plus de détails.

  • Arrêté  : True lorsque l'état souhaité de l'espace est réglé surStopped. Les pods sont fermés mais le stockage et la configuration sont préservés.

CloudWatch Intégration des journaux

Vous pouvez installer le module complémentaire de CloudWatch journalisation pour envoyer les journaux Space à Amazon CloudWatch Logs afin de centraliser la gestion et la conservation des journaux. Cela permet l'agrégation de journaux sur plusieurs clusters et l'intégration à CloudWatch Insights pour les requêtes et les analyses. Tous les kubectl journaux disponibles ci-dessus peuvent être consultés CloudWatch avec ce plugin.

Référence : https://docs.aws.amazon.com/sagemaker/latest/dg/sagemaker-hyperpod-eks-cluster-observability-cluster-cloudwatch-ci.html.

HyperPod Observabilité Add-on

Le module complémentaire SageMaker HyperPod d'observabilité fournit des tableaux de bord complets pour surveiller l'utilisation des ressources spatiales. Après avoir installé le module complémentaire, vous pouvez consulter la mémoire de l'espace et l'utilisation du processeur dans l'onglet Tâches de la HyperPod console, qui affiche les mesures dans les tableaux de bord Amazon Managed Grafana.

Référence : https://docs.aws.amazon.com/sagemaker/latest/dg/sagemaker-hyperpod-observability-addon.html

Indicateurs clés disponibles :

  • Utilisation du processeur et de la mémoire par espace

  • Métriques du GPU (le cas échéant)