Amazon SageMaker HyperPod Slurm, 클러스터 확장 기능 출시: 관측성·사용자 관리 두 가지 관리형 확장, HyperPod 지원 전 리전에서 사용 가능
AWS가 SageMaker HyperPod Slurm 클러스터용 클러스터 확장 기능을 발표했습니다. 첫 제공 대상은 관측성과 사용자 관리 두 가지 관리형 확장이며 API 또는 콘솔로 관리할 수 있습니다. AWS 설명에 따르면 추가 비용은 없고 AMI 및 지속적 프로비저닝 등의 조건을 충족해야 합니다.
뉴스 날짜: 읽는 데 약 8분
목차
AWS는 공식 블로그에서 Amazon SageMaker HyperPod의 Slurm 클러스터에 '클러스터 확장 기능'이 추가됐다고 발표했습니다. Slurm은 여러 GPU 머신에서 연산 작업을 스케줄링하고 분배하는 시스템으로, 대규모 AI 모델을 학습하는 공유 클러스터에서 흔히 쓰입니다. 지금까지 노드의 모니터링 도구와 사용자 계정은 대개 '라이프사이클 스크립트'로 설정했습니다. 라이프사이클 스크립트는 노드 생성 시 자동으로 실행되는 설치 스크립트입니다. 새 기능을 쓰면 API 또는 SageMaker AI 콘솔로 이러한 소프트웨어를 선언하고 업데이트하며 확인할 수 있습니다. AWS는 이를 통해 노드별 설정이 점차 달라지는 문제를 줄일 수 있다고 설명합니다. 또한 문제가 생기면 어떤 구성 요소에서 몇 개 노드에 영향이 있는지 각 노드에 로그인하지 않고도 바로 볼 수 있다고 밝혔습니다.
클러스터 확장 기능은 기존 라이프사이클 스크립트와 무엇이 다른가요?
AWS에 따르면 라이프사이클 스크립트는 노드 프로비저닝(노드를 준비해 클러스터에 투입하는 과정) 시에만 실행됩니다. 변경할 때마다 스크립트를 수정한 뒤 노드를 교체하거나 클러스터 전체에서 다시 실행해야 합니다. 오류는 스크립트가 실행될 때에야 드러납니다. 실제로 무엇이 설치됐는지 보고하는 메커니즘도 없어서 노드가 점차 불일치 상태가 될 수 있습니다. AWS는 클러스터 확장 기능을 AWS가 관리하는 소프트웨어 패키지로 소개하며, API 또는 콘솔로 설치·구성·업데이트·제거할 수 있다고 설명합니다.
- 사전 검증: 설정을 제출하면 스키마(각 설정 항목의 이름과 형식을 규정한 규칙)로 검사하므로, 잘못 입력한 설정은 노드에 도달하기 전에 거부됩니다.
- 노드 일관성: 스케일업이나 교체로 추가된 노드를 포함해 모든 노드에 적용됩니다.
- API 또는 콘솔로 변경: 두 방식 모두 동일하게 검증된 설정을 사용합니다.
- 상태 가시성: 각 확장이 상태와 노드별 상태 정보를 보고합니다.
현재 제공되는 두 가지 확장은 무엇이며 각각 어떤 역할을 하나요?
AWS 설명에 따르면 현재 두 가지 확장을 지원합니다. 첫째는 관측성(observability) 확장으로, 클러스터 상태를 지표로 모니터링하는 기능입니다. 이 확장은 노드, GPU, EFA(Elastic Fabric Adapter, 노드 간 고속 네트워크 인터페이스), Slurm 작업, Slurm 클러스터의 모니터링 지표를 수집합니다. 수집한 지표는 Amazon CloudWatch 또는 Amazon Managed Service for Prometheus로 전송됩니다. Amazon Managed Grafana와 함께 쓰면 Clusters와 Jobs 두 가지 사전 구성 대시보드를 이용할 수 있습니다. 둘째는 사용자 관리 확장입니다. 이 확장은 모든 노드에 동일한 ID의 사용자와 그룹을 만들고, 노드 유형별 SSH 접속 및 sudo(관리자 권한으로 명령 실행) 권한을 제어합니다. 또한 Slurm 회계(accounting, 사용자별 작업·자원 사용 기록)에 사용자를 등록하며 Active Directory와도 연동할 수 있습니다.
| 항목 | 관측성 | 사용자 관리 |
|---|---|---|
| 확장 이름 | sagemaker-observability | sagemaker-user-management |
| 주요 기능 | 노드, GPU, EFA, Slurm 지표 수집 | 일관된 ID의 사용자·그룹 생성, SSH 및 sudo 관리 |
| 출력 또는 연동 | CloudWatch 또는 Managed Service for Prometheus, Managed Grafana와 함께 사용 가능 | Active Directory(LDAPS) 연결 또는 로컬 계정 사용 가능 |
| 추가 요건 | 실행 역할에 CloudWatch 또는 aps:RemoteWrite 권한 필요 | 공유 파일 시스템(예: FSx for Lustre) 필요, AD 시크릿 읽기에는 secretsmanager:GetSecretValue 필요 |
도입 절차와 운영상 영향은 어떤가요?
확장을 사용하려면 클러스터가 2026년 11월 2일 또는 그 이후의 HyperPod AMI를 사용하고, 지속적 프로비저닝도 활성화돼 있어야 합니다. AMI는 미리 구성된 시스템 이미지입니다. 지속적 프로비저닝은 백그라운드에서 컴퓨팅 용량 확보를 계속 재시도하는 기능입니다. AWS에 따르면 확장 상태는 Creating, Updating, Active, Degraded로 나뉩니다. 노드 수준의 문제는 DescribeClusterExtension의 Health 필드에 코드, 메시지, 영향을 받은 노드 수로 표시됩니다. 내부 실패는 HyperPod가 스스로 재시도합니다. 그 밖의 문제는 원인을 수정한 뒤 내용을 바꾸지 않은 UpdateClusterExtension으로 다시 시도해야 합니다. 버전을 업그레이드할 때 기존 설정이 새 버전 스키마와 맞지 않으면 요청이 거부되며, 아무것도 변경되지 않습니다.
이미 스크립트로 같은 기능을 제공하고 있다면, AWS는 기능별로 하나씩 마이그레이션할 것을 권장합니다. 절차는 다음과 같습니다. 먼저 UpdateClusterSoftware로 2026년 11월 AMI 이상으로 업그레이드합니다. 이어서 라이프사이클 스크립트에서 해당 기능을 끄고 S3에 업로드합니다. 그다음 계획된 유지보수 시간대에 각 노드에서 스크립트로 설치한 에이전트를 제거합니다. 마지막으로 CreateClusterExtension을 호출합니다. AWS는 컨트롤러를 포함한 모든 노드에 여전히 SSH로 접속해 자신의 스크립트를 실행할 수 있다고도 강조합니다.
비용과 이용 가능 리전은?
AWS에 따르면 클러스터 확장 기능은 2026년 11월부터 HyperPod를 지원하는 모든 리전에서 사용할 수 있으며, 확장 자체에는 추가 비용이 없습니다. 함께 쓰는 Amazon CloudWatch, Amazon Managed Service for Prometheus, AWS Secrets Manager 등 AWS 리소스 요금은 사용자가 부담합니다.
자주 묻는 질문
어떤 경우에 확장을 쓰고, 어떤 경우에 스크립트를 계속 쓰나요?
AWS 권장에 따르면, HyperPod가 대응하는 관리형 소프트웨어 기능을 제공하면 확장을 사용합니다. GPU·작업 지표나 일관된 사용자 계정이 그런 예입니다. 조직 고유의 소프트웨어나 초기화에는 커스텀 AMI와 라이프사이클 스크립트를 사용합니다.
확장을 사용해도 노드에 직접 로그인할 수 있나요?
네. AWS에 따르면 컨트롤러 노드를 포함한 모든 노드에 대한 전체 접근 권한이 유지되며, SSH로 접속해 설정하거나 자신의 라이프사이클 스크립트를 실행할 수 있습니다.
확장 버전을 업그레이드하려면 AMI도 업데이트해야 하나요?
AWS 설명에 따르면 필요하지 않습니다. AWS가 새 확장 버전을 내놓으면 설치 가능한 버전을 조회한 뒤 제자리에서 업그레이드할 수 있습니다. 이후 추가되는 노드도 새 버전을 받습니다. 업그레이드는 앞으로만 가능합니다.
스크립트에서 사용자 관리 확장으로 바꾸면 계정이 바뀌나요?
AWS에 따르면 사용자 관리 확장으로 전환해도 동일한 사용자 이름과 사용자 ID가 유지됩니다.
확장이 Degraded 상태가 되면 어떻게 하나요?
AWS 설명에 따르면 먼저 DescribeClusterExtension의 Health 필드에서 문제 코드와 영향을 받은 노드 수를 확인합니다. 원인을 수정한 뒤에는 변경 없는 UpdateClusterExtension을 호출해 다시 시도합니다. 내부 실패는 HyperPod가 스스로 재시도합니다.
같은 주제의 글
Claude Code 2.1.330: 엔터프라이즈 관리 콘솔 로그인, easel 차트 모듈, 예약 작업 최대 30일로 연장
Anthropic은 Claude Code 2.1.330 변경 로그에서 엔터프라이즈 관리 콘솔 로그인, 내장 차트 모듈 easel, 최대 30일 예약 작업, 더 엄격한 rm 명령 승인을 소개했습니다.
AWS Quick 업데이트: 대화형 플로 생성, 멀티 에이전트 협업, Meta ads·Amplitude 커넥터 추가… AWS "Quick 제공 전 리전에서 즉시 이용 가능"
AWS, 분산 KV 캐시 에이전트 스킬 공개: AWS "자체 호스팅 LLM 비용 최대 40%↓, 첫 토큰 지연 최대 80%↓"
Amazon Textract Insights 정식 출시: 자연어로 문서 필드 추출, 신뢰도 점수와 페이지 위치 제공, 파일당 최대 3,000페이지
출처
위에 기재된 참고 자료와 확인일 기준 정보를 바탕으로 정리했습니다. 요금, 시간표, 기능, 이용 약관은 바뀔 수 있으므로 여행, 예약 또는 구매 전에 해당 공식 사이트에서 최신 정보를 확인해 주세요.