개요
Scale-Out Computing on AWS는 컴퓨터 지원 엔지니어링(CAE)과 같은 컴퓨팅 집약적 워크플로를 위한 다중 사용자 환경을 배포하고 운영하는 데 도움이 됩니다. 이 AWS 솔루션은 고속 네트워크 백본, 무제한 스토리지, 비용과 예산 관리를 AWS 내에서 직접 통합과 같은 다양한 컴퓨팅 리소스를 특징으로 합니다.
이점
관리자와 사용자가 Amazon Elastic Compute Cloud(Amazon EC2) 클러스터와 상호 작용하는 데 사용할 수 있는 공통 API 세트가 포함된 예제 사용자 인터페이스(UI)를 배포하고 설정합니다.
Desktop Cloud Visualization(DCV) 그래픽 세션을 통해 EC2 클러스터에 쉽게 액세스하여 사전 및 사후 처리 시각화 작업을 수행하는 데 도움이 됩니다.
스케줄러와 애플리케이션 로그를 거의 실시간으로 수집한 다음 추가 처리를 위해 데이터 레이크에 저장합니다.
솔루션과 함께 배포된 스크립트 모음을 사용자 지정하고 확장하여 데이터를 수집하고 일반적인 클러스터 태스크를 실행하는 사용자를 지원합니다.
기술 세부 정보
구현 가이드를 사용하여 이 아키텍처를 자동으로 배포할 수 있습니다.
1단계
Amazon EC2 Auto Scaling은 컴퓨팅 작업 확장과 같은 클러스터 사용자 태스크를 실행하는 데 필요한 리소스를 자동으로 프로비저닝합니다.
2단계
이 솔루션은 또한 영구 스토리지용 Amazon Elastic File System(Amazon EFS), 영구 로그용 Amazon Simple Storage Service(S3) 및 선택적 병렬 파일 시스템인 Amazon FSx for Lustre를 배포합니다.
3단계
기본적으로 Amazon Elastic Compute Cloud(Amazon EC2) 인스턴스는 사용자가 제출한 작업에 필요한 AWS 리소스를 동적으로 프로비저닝하는 스케줄러를 구현합니다. 스케줄러 인스턴스는 사용자와 관리자가 환경과 상호 작용할 수 있는 웹 인터페이스도 호스팅합니다.
4단계
배치 작업을 제출하고 GUI 도구를 실행하는 데 사용할 수 있는 Amazon DCV를 사용하는 2D 또는 3D 워크스테이션을 시작합니다.
5단계
사용되는 보안 서비스 및 리소스에는 AWS Secrets Manager, AWS Certificate Manager, 보안 그룹 및 AWS Identity and Access Management(IAM)가 있습니다.
6단계
AWS Lambda 함수는 필수 사전 조건을 확인하고 Application Load Balancer(ALB)에 대한 기본 서명 인증서를 생성하여 DCV 워크스테이션 세션에 대한 액세스를 관리합니다.
7단계
Amazon OpenSearch Service 클러스터는 작업 및 호스트 정보를 저장합니다.
8단계
Elastic Load Balancing은 가용 영역 전체에 대한 액세스를 보장하는 데 사용되며 비용 할당 태그는 AWS Cost Explorer와 함께 사용됩니다.
1단계
Amazon EC2 Auto Scaling이 컴퓨팅 작업 스케일 아웃 같은 클러스터 사용자 태스크 실행에 필요한 리소스를 자동으로 프로비저닝합니다.
2단계
이 솔루션은 또한 영구 스토리지용 Amazon Elastic File System(Amazon EFS), 영구 로그용 Amazon Simple Storage Service(S3) 및 선택적 병렬 파일 시스템인 Amazon FSx for Lustre를 배포합니다.
3단계
기본적으로 Amazon Elastic Compute Cloud(Amazon EC2) 인스턴스는 사용자가 제출한 작업에 필요한 AWS 리소스를 동적으로 프로비저닝하는 스케줄러를 구현합니다. 스케줄러 인스턴스는 사용자와 관리자가 환경과 상호 작용할 수 있는 웹 인터페이스도 호스팅합니다.
4단계
배치 작업을 제출하고 GUI 도구를 실행하는 데 사용할 수 있는 Amazon DCV를 사용하는 2D 또는 3D 워크스테이션을 시작합니다.
5단계
사용되는 보안 서비스 및 리소스에는 AWS Secrets Manager, AWS Certificate Manager, 보안 그룹 및 AWS Identity and Access Management(IAM)가 있습니다.
6단계
AWS Lambda 함수는 필수 사전 조건을 확인하고 Application Load Balancer(ALB)에 대한 기본 서명 인증서를 생성하여 DCV 워크스테이션 세션에 대한 액세스를 관리합니다.
7단계
Amazon OpenSearch Service 클러스터는 작업 및 호스트 정보를 저장합니다.
8단계
Elastic Load Balancing은 가용 영역 전체에 대한 액세스를 보장하는 데 사용되며 비용 할당 태그는 AWS Cost Explorer와 함께 사용됩니다.
관련 콘텐츠
re:Invent 2020 프레젠테이션을 보여주는 이 동영상에서는 클라우드 기반 서비스 및 자동화를 통해 셀프 서비스를 장려하면서 장애물을 극복하고 엔지니어링 경험을 개선하는 Rivian의 사례를 소개합니다.
이 동영상은 Scale-Out Computing on AWS를 구현하여 컴퓨팅 집약적 워크플로를 위한 다중 사용자 환경을 배포하고 운영하는 방법을 보여줍니다.