목록으로

Programming Notes

Amazon SageMaker Unified Studio에서 데이터 처리 작업을 위한 AWS Glue 5.1 지원

Amazon SageMaker Unified Studio 에서 Visual ETL, 노트북 및 코드 기반 데이터 처리 작업을 위한 AWS Glue 5.1 을 지원합니다. Amazon SageMaker Unified Studio에서 AWS Glue 5.1을 사용하면 데이터...

Amazon SageMaker Unified Studio에서 Visual ETL, 노트북 및 코드 기반 데이터 처리 작업을 위한 AWS Glue 5.1을 지원합니다. Amazon SageMaker Unified Studio에서 AWS Glue 5.1을 사용하면 데이터 엔지니어와 데이터 과학자는 Python 3.11 및 Scala 2.12.18이 포함된 Apache Spark 3.5.6에서 작업을 실행할 수 있으며, Apache Iceberg 1.10.0, Apache Hudi 1.0.2, Delta Lake 3.3.2를 포함한 업데이트된 오픈 테이블 형식 라이브러리를 사용할 수 있습니다.

데이터 처리 작업을 생성할 때 작업 설정의 버전 드롭다운에서 Glue 5.1을 선택하여 Amazon SageMaker Unified Studio에서 AWS Glue 5.1을 사용할 수 있습니다. 이는 Visual ETL 작업, 노트북 작업 및 코드 기반 작업에 모두 적용되므로, 모든 데이터 처리 워크플로에서 최신 Spark 런타임 및 오픈 테이블 형식 라이브러리를 활용할 수 있습니다.

Amazon SageMaker Unified Studio의 AWS Glue 5.1은 Amazon SageMaker Unified Studio를 사용할 수 있는 모든 리전에서 제공됩니다. 자세한 내용은 Amazon SageMaker Unified Studio 설명서를 참조하세요. 업데이트된 오픈 테이블 형식 지원 및 액세스 제어 기능 등 AWS Glue 5.1에 포함된 내용에 대한 자세한 내용은 AWS Glue 설명서를 참조하세요.