AWS Glue 5.1이 다음 18개 AWS 리전에서 정식 출시되었습니다: 아프리카(케이프타운), 아시아 태평양(하이데라바드, 자카르타, 멜버른, 오사카, 서울, 타이베이), 캐나다(캘거리, 중부), 유럽(런던, 밀라노, 파리, 취리히), 이스라엘(텔아비브), 멕시코(중부), 중동(바레인, UAE), 미국 서부(캘리포니아 북부).
AWS Glue는 여러 소스에서 데이터를 검색, 준비, 이동 및 통합하는 작업을 간소화하는 서버리스의 확장 가능한 데이터 통합 서비스입니다. AWS Glue 5.1은 코어 엔진을 Apache Spark 3.5.6, Python 3.11 및 Scala 2.12.18로 업그레이드하여 성능 및 보안을 개선했습니다. 또한 Apache Hudi 1.0.2, Apache Iceberg 1.10.0 및 Delta Lake 3.3.2를 포함한 오픈 테이블 형식 라이브러리 지원을 업데이트했습니다. 추가적으로 AWS Glue 5.1은 Apache Iceberg 형식 버전 3.0을 지원하여 기본 열 값, 읽기 병합 테이블용 삭제 벡터, 다중 인수 변환, 행 계보 추적 기능을 추가합니다. 이번 릴리스는 Spark DataFrames 및 Spark SQL의 쓰기 작업(DML 및 DDL 모두)으로 AWS Lake Formation 세분화된 액세스 제어를 확장합니다. 이전에는 이 기능이 읽기 작업으로만 제한되었습니다. AWS Glue 5.1은 또한 Apache Hudi 및 Delta Lake 테이블에 대한 Apache Spark에서 전체 테이블 액세스 제어를 추가하여 데이터에 대한 보다 포괄적인 보안 옵션을 제공합니다.
이번 확장으로 AWS Glue 5.1은 현재 총 33개 AWS 리전에서 사용할 수 있게 되었습니다. AWS Glue API, AWS 명령줄 인터페이스(CLI), AWS 소프트웨어 개발 키트(SDK), AWS Glue Studio 또는 Amazon SageMaker Unified Studio를 사용하여 AWS Glue 5.1을 시작할 수 있습니다. 자세한 내용은 AWS Glue 제품 페이지 및 설명서를 참조하세요.