Amazon Managed Workflows for Apache Airflow(MWAA)가 이제 인기 있는 오픈 소스 워크플로 오케스트레이션 프레임워크의 최신 메이저 릴리스인 Apache Airflow 버전 3.2를 지원합니다. Amazon MWAA는 기본 인프라를 관리할 필요 없이 대규모로 Apache Airflow를 실행할 수 있게 해주는 관리형 서비스입니다. 이번 릴리스를 통해 AWS에서 데이터 파이프라인을 구축하고 운영하는 팀은 새로운 데이터 인식 스케줄링(data-aware scheduling) 기능과 향상된 개발자 생산성을 경험할 수 있습니다.
Apache Airflow 3.2를 사용하면 이제 전체 자산이 아닌 날짜별로 파티셔닝된 S3 경로와 같은 특정 데이터 슬라이스를 기반으로 다운스트림 DAG를 트리거하는 '자산 파티셔닝(asset partitioning)' 기능을 사용할 수 있습니다. 이를 통해 데이터 엔지니어링 팀은 파이프라인 실행을 더욱 정밀하게 제어할 수 있습니다. 또한 이번 릴리스에서는 승인을 위한 전체 감사 이력 보기, AgenticOperator에 대한 HITL 지원, 마감 기한 알림(Deadline Alerts)을 위한 동기 콜백 지원 등 Human-in-the-Loop(HITL) 기능이 확장되었습니다. 추가적인 개선 사항으로는 대규모 DAG의 렌더링 속도를 높여주는 그리드 뷰(Grid View) 가상화, Airflow UI에서의 전체 XCom 관리 기능, 그리고 PythonOperator에서의 비동기 호출(async callable) 지원 등이 포함되었습니다.
현재 지원되는 모든 Amazon MWAA 리전의 AWS Management Console에서 클릭 몇 번만으로 새로운 Apache Airflow 3.2 환경을 시작하거나 2.11 이상의 버전에서 업그레이드할 수 있습니다. Apache Airflow 3.2에 대한 자세한 내용은 Amazon MWAA 문서 및 Apache Airflow 문서의 Apache Airflow 3.2 변경 로그를 참조하세요.
Apache, Apache Airflow 및 Airflow는 미국 및/또는 기타 국가에서 Apache Software Foundation의 등록 상표 또는 상표입니다.