AWS Glue ETL 사용자 백그라운드 세션 - AWS Glue
사용자 백그라운드 세션 구성기본 사용자 백그라운드 세션 기간사용자 백그라운드 세션 비활성화가 미치는 영향런타임 고려 사항

AWS Glue ETL 사용자 백그라운드 세션

사용자 백그라운드 세션을 사용하면 사용자가 노트북 인터페이스에서 로그오프한 후에도 장기 실행 분석 및 기계 학습 워크로드를 계속 실행할 수 있습니다. 이 기능은 AWS Glue의 신뢰할 수 있는 ID 전파 기능을 통해 구현됩니다. 다음 페이지에서는 사용자 백그라운드 세션의 구성 옵션과 동작을 설명합니다.

참고

사용자 백그라운드 세션은 SageMaker Unified Studio와 같은 노트북 인터페이스를 통해 시작된 AWS Glue 대화형 세션에 적용됩니다. 이 기능의 활성화 또는 비활성화는 새 대화형 세션에만 영향을 미치며 기존 활성 세션에는 영향을 미치지 않습니다.

사용자 백그라운드 세션 구성

적절하게 작동하려면 두 가지 수준에서 사용자 백그라운드 세션을 활성화해야 합니다.

  1. IAM Identity Center 인스턴스 수준(IdC 관리자가 구성)

  2. AWS Glue Identity Center 구성 수준(AWS Glue 관리자가 구성)

AWS Glue 사용자 백그라운드 세션 활성화

AWS Glue 사용자 백그라운드 세션을 활성화하려면 구성을 생성하거나 업데이트할 때 Identity Center 구성에서 userBackgroundSessionsEnabled 파라미터를 true로 설정해야 합니다.

사전 조건

  • AWS Glue Identity Center 구성을 생성/업데이트하는 데 사용되는 IAM 역할에 sso:PutApplicationSessionConfiguration 권한이 있어야 합니다. 이 권한을 통해 AWS Glue는 AWS Glue 관리형 IdC 애플리케이션 수준에서 사용자 백그라운드 세션을 활성화할 수 있습니다.

  • AWS Glue 대화형 세션은 AWS Glue 버전 5.0 이상을 사용해야 하며 신뢰할 수 있는 ID 전파가 활성화되어 있어야 합니다.

AWS CLI를 사용하여 사용자 백그라운드 세션 활성화:

aws glue create-glue-identity-center-configuration \
    --instance-arn "arn:aws:sso:::instance/ssoins-1234567890abcdef" \
    --user-background-sessions-enabled

기존 구성 업데이트:

aws glue update-glue-identity-center-configuration \
    --user-background-sessions-enabled

구성 매트릭스

효과적인 사용자 백그라운드 세션 구성은 AWS Glue 구성 설정과 IAM Identity Center 인스턴스 수준 설정 모두에 따라 달라집니다.

IAM Identity Center userBackgroundSession 활성화? AWS Glue userBackgroundSessionsEnabled 동작
예 TRUE 사용자 백그라운드 세션 활성화됨
예 FALSE 사용자가 로그아웃하고 세션 만료됨
아니요 TRUE 세션 생성 실패(예외 발생)
아니요 FALSE 사용자가 로그아웃하고 세션 만료됨

기본 사용자 백그라운드 세션 기간

기본적으로 IAM Identity Center에서 모든 사용자 백그라운드 세션의 기간 한도는 7일입니다. 관리자는 IAM Identity Center 콘솔에서 이 기간을 수정할 수 있습니다. 이 설정은 IAM Identity Center 인스턴스 수준에서 적용되며 해당 인스턴스 내에서 지원되는 모든 IAM Identity Center 애플리케이션에 영향을 미칩니다.

  • 기간은 15분에서 최대 90일까지 임의의 값으로 설정할 수 있습니다.

  • 이 설정은 IAM Identity Center 콘솔의 설정 → 인증 → 구성(비대화형 작업 섹션)에서 구성됩니다.

참고

AWS Glue 대화형 세션에는 기본적으로 별도의 48시간 유휴 제한 시간이 있습니다. 세션은 AWS Glue 세션 유휴 제한 시간 또는 사용자 백그라운드 세션 기간 중 먼저 도래하는 시점에 종료됩니다.

사용자 백그라운드 세션 비활성화가 미치는 영향

AWS Glue 구성 수준에서 사용자 백그라운드 세션이 비활성화된 경우:

  • 기존 대화형 세션: 사용자 백그라운드 세션이 활성화된 상태로 시작된 경우 중단 없이 계속 실행됩니다. 이러한 세션은 자연스럽게 종료되거나 명시적으로 중지될 때까지 계속해서 기존 백그라운드 세션 토큰을 사용합니다.

  • 신규 대화형 세션: 신뢰할 수 있는 표준 ID 전파 흐름을 사용하며 사용자가 로그아웃하거나 대화형 세션이 만료될 때(예: SageMaker Unified Studio JupyterLab 노트북을 닫을 때) 종료됩니다.

사용자 백그라운드 세션 기간 변경

IAM Identity Center에서 사용자 백그라운드 세션의 기간 설정이 수정된 경우:

  • 기존 대화형 세션: 시작된 것과 동일한 백그라운드 세션 기간으로 계속 실행

  • 신규 대화형 세션: 백그라운드 세션에 새 세션 기간 사용

런타임 고려 사항

세션 종료 조건

사용자 백그라운드 세션을 사용할 때 AWS Glue 대화형 세션은 다음 중 하나가 발생할 때까지 계속 실행됩니다.

  • 사용자 백그라운드 세션 만료(IdC 구성 기준, 최대 90일)

  • 관리자가 사용자 백그라운드 세션을 수동으로 취소

  • AWS Glue 대화형 세션이 유휴 제한 시간에 도달(기본값: 마지막 명령문 실행 이후 48시간)

  • 사용자가 노트북 커널을 명시적으로 중지하거나 재시작

데이터 지속성

사용자 백그라운드 세션을 사용하는 경우:

  • 사용자는 로그아웃 이후 결과를 보기 위해 노트북 인터페이스에 다시 연결할 수 없음

  • 실행이 완료되기 전에 영구 스토리지(예: Amazon S3)에 결과를 기록하도록 Spark 명령문 구성

비용 영향

  • 사용자가 SageMaker Unified Studio JupyterLab 세션을 종료한 후에도 작업은 계속 실행되며 전체 실행 기간 동안 요금이 발생합니다.

  • 활성 백그라운드 세션을 모니터링하면 잊어버리거나 중단된 세션으로 인한 불필요한 비용이 발생하지 않습니다.

기능 가용성

AWS Glue 사용자 백그라운드 세션은 다음에 사용 가능합니다.

  • AWS Glue 대화형 세션 전용(AWS Glue 작업 및 스트리밍 작업은 지원되지 않음)

  • AWS Glue 버전 5.0 이상

  • 신뢰할 수 있는 ID 전파가 활성화된 구성 전용