Amazon SageMaker AI를 활용한 아제르바이잔어 언어 모델 학습

아제르바이잔의 선도적인 통신 서비스 제공업체인 Azercell Telecom LLC는 통신 분야의 활용 사례와 고객 응대용 챗봇을 위해 Amazon SageMaker AI를 기반으로 아제르바이잔어 대규모 언어 모델(LLM)을 구축하고자 했습니다. 당면 과제는 학습 데이터가 제한적이고 아제르바이잔어에 대한 효율적인 LLM 학습 청사진이 없는 상황에서, 형태학적으로 복잡한 언어 특성에 맞춰 파운데이션 모델(FM)을 적응시키는 것이었습니다. 6주간의 협업을 통해 Azercell은 AWS 생성형 AI 혁신 센터(AWS Generative AI Innovation Center)와 함께 Amazon SageMaker AI에서 즉시 운영 가능한(production-ready) 프레임워크를 구축했습니다.