本文為英文版的機器翻譯版本,如內容有任何歧義或不一致之處,概以英文版為準。
AWS PCS 中的排程器日誌
您可以設定 AWS PCS 將詳細的記錄資料從叢集排程器傳送至 Amazon CloudWatch Logs、Amazon Simple Storage Service (Amazon S3) 和 Amazon Data Firehose。這可協助監控和故障診斷。
先決條件
管理 AWS PCS 叢集的 IAM 主體必須允許 pcs:AllowVendedLogDeliveryForResource
動作。
下列範例 IAM 政策會授予所需的許可。
{ "Version": "2012-10-17", "Statement": [ { "Sid": "PcsAllowVendedLogsDelivery", "Effect": "Allow", "Action": ["pcs:AllowVendedLogDeliveryForResource"], "Resource": [ "arn:aws:pcs:::cluster/*" ] } ] }
設定排程器日誌
您可以使用 AWS Management Console 或 為您的 AWS PCS 叢集設定排程器日誌 AWS CLI。
排程器日誌串流路徑和名稱
AWS PCS 排程器日誌的路徑和名稱取決於目的地類型。
-
CloudWatch Logs
-
CloudWatch Logs 串流遵循此命名慣例。
AWSLogs/PCS/${cluster_id}/${log_name}_${scheduler_major_version}.log
範例
AWSLogs/PCS/abcdef0123/slurmctld_24.05.log
-
-
S3 bucket (S3 儲存貯體)
-
S3 儲存貯體輸出路徑遵循此命名慣例:
AWSLogs/${account-id}/PCS/${region}/${cluster_id}/${log_name}/${scheduler_major_version}/yyyy/MM/dd/HH/
範例
AWSLogs/111111111111/PCS/us-east-2/abcdef0123/slurmctld/24.05/2024/09/01/00.
-
S3 物件名稱遵循此慣例:
PCS_${log_name}_${scheduler_major_version}_#{expr date 'event_timestamp', format: "yyyy-MM-dd-HH"}_${cluster_id}_${hash}.log
範例
PCS_slurmctld_24.05_2024-09-01-00_abcdef0123_0123abcdef.log
-
排程器日誌記錄範例
AWS PCS 排程器日誌是結構化的。除了 Slurm 控制器程序發出的日誌訊息之外,還包含叢集識別符、排程器類型、主要和修補程式版本等欄位。請見此處範例。
{
"resource_id": "s3431v9rx2",
"resource_type": "PCS_CLUSTER",
"event_timestamp": 1721230979,
"log_level": "info",
"log_name": "slurmctld",
"scheduler_type": "slurm",
"scheduler_major_version": "24.11",
"scheduler_patch_version": "5",
"node_type": "controller_primary",
"message": "[2024-07-17T15:42:58.614+00:00] Running as primary controller\n"
}