다음 단계

AWS Glue 변환에 대한 이해

AWS Glue는 보다 효율적인 데이터 처리를 위해 내장된 변환 기능을 포함합니다. 함수는 변환에서 변환으로 전달되며, 이 데이터 구조는 Apache Spark SQL 데이터프레임의 확장인 DynamicFrame이라는 데이터 구조로 전달됩니다. DynamicFrame은 각 레코드가 자기 설명적이기 때문에 처음에는 스키마가 필요하지 않다는 점을 제외하면 DataFrame과 유사합니다.

여러 AWS Glue PySpark 내장 함수에 대해 알아보려면 AWS 계정을 사용하지 않고 로컬에서 AWS Glue ETL 파이프라인 구축하기 블로그 게시물을 참조하세요.

첫 ETL 작업 작성

이전에 ETL 작업을 작성한 적이 없다면 데이터를 Apache Parquet 패턴으로 변환하는 세 가지 AWS Glue ETL 작업 유형을 사용하는 것으로 시작할 수 있습니다.

ETL 작업을 작성한 경험이 있다면 AWS Glue GitHub 예제를 사용하여 더 깊이 탐색할 수 있습니다.

요금

요금 정보는 AWS Glue 요금을 참조하세요. AWS Pricing Calculator를 사용하여 다양한 AWS Glue 요소를 사용하는 데 드는 월별 비용을 추정할 수 있습니다.