HPC(고성능 컴퓨팅) 기능을 통해 과학자와 엔지니어는 높은 대역폭, 향상된 네트워킹, 고용량 컴퓨팅 파워가 필요한 애플리케이션을 사용할 때의 복잡한 과학, 공학, 비즈니스 관련 문제를 해결할 수 있습니다. AWS는 클라우드에서 고성능 컴퓨팅을 실행하여 연구 속도를 높이고 대규모의 자본 투자 없이 온디맨드 클러스터 컴퓨팅 또는 클러스터 GPU 서버를 제공하여 비용을 절감할 수 있도록 합니다. 밀결합한 IO 집약적인 워크로드 처리를 위해 양방향 고대역폭 네트워크에서 액세스할 수 있습니다. 이를 통해 처리량 지향 애플리케이션을 위해 수천 개의 코어로 확장할 수 있습니다.
Amazon Web Services에서 고성능 컴퓨팅 클러스터 작업을 실행하는 이점에 대해 설명하는 간단한 동영상입니다. 이 동영상에서는 클라우드 인프라 실행의 기본적인 이점과 AWS 클라우드만이 제공하는 이점에 대해 설명합니다. 선수금 없는 종량제로 간편하게 요금을 지불하면서 10Gb 속도의 연결과 도구를 통해 수많은 인텔 Xenon 프로세서에 즉시 액세스하여 HPC 클러스터를 손쉽게 만드는 방법을 알아볼 수 있습니다.
AWS에서 HPC 클러스터를 실행하는 방법을 알아보려면 데모 프레임워크인 cfncluster를 사용해 보십시오.
Amazon Elastic Compute Cloud(EC2)에서의 HPC(고성능 컴퓨팅)는 클러스터 컴퓨팅 최적화 및 GPU 인스턴스 유형(가상 머신)을 통해 사용할 수 있습니다. 다른 EC2 인스턴스처럼 사용할 수도 있지만, 원래는 고성능 네트워킹을 제공하도록 특별히 설계되었기 때문에 사용자는 온디맨드 방식으로 수많은 인스턴스로 확장할 수 있습니다.
이제 최신 세대의 Amazon EC2 컴퓨팅 최적화 인스턴스인 C4 인스턴스를 실행할 수 있습니다. C4 인스턴스는 트래픽이 높은 프론트 엔드 서버군, MMO 게임, 미디어 처리, 코드 변환, HPC(고성능 컴퓨팅) 애플리케이션과 같은 컴퓨팅 바인딩 워크로드를 위해 설계되었습니다.
C4 인스턴스는 5개 크기로 구분되며, 최대 36개의 vCPU를 제공합니다. C4 인스턴스는 기본 주파수 2.9GHz에서 실행되는 인텔 E5-2666 v3(코드명 Haswell) 프로세서를 기반으로 하며, 인텔 ® Turbo Boost를 통해 최고 3.5GHz의 클록 속도를 제공합니다. 각각의 C4 인스턴스 유형은 기본적으로 EBS에 최적화되어 있으며, 추가 비용이 발생하지 않습니다. 이 기능은 인스턴스에 제공되는 범용 네트워크 처리량을 훨씬 뛰어넘는 500Mbps ~ 4,000 Mbps의 전용 처리량을 제공합니다.
EC2 클러스터 컴퓨팅 인스턴스 유형에 대해 자세히 알아보기
P2 인스턴스에 대해 자세히 알아보기
P2 인스턴스는 기계 학습, 엔지니어링 시뮬레이션, 컴퓨팅 금융, 내직 해석, 분자 모델링, 유전체학, 렌더링, 고성능 데이터베이스 및 기타 GPU 컴퓨팅 워크로드에 적합합니다.
P2 인스턴스는 192기가바이트(GB)의 비디오 메모리, 4만 개의 병렬 처리 코어, 70테라플롭스의 단정밀도 부동 소수점 성능, 23테라플롭스의 배정밀도 부동 소수점 성능, GPU 간에 더 높은 대역폭과 더 짧은 지연 시간 피어 투 피어 통신을 위한 GPUDirect 기술을 갖춘 16 NVIDIA K80 GPU를 제공합니다. 또한, P2 인스턴스는 최대 732GB 호스트 메모리, 커스텀 인텔 제온 E5-2686 v4(Broadwell) 프로세서를 사용하는 최대 64개 vCPU, I/O 작업용 전용 네트워크 용량, Amazon EC2 Elastic Network Adaptor를 통한 향상된 네트워킹을 지원합니다. P2 인스턴스를 사용하면 사전 자본 투자 없이 CUDA 병렬 컴퓨팅 플랫폼 또는 OpenCL 프레임워크를 사용하여 컴퓨팅 집약적 애플리케이션을 구축 및 배포할 수 있습니다.
GPU 인스턴스 유형에 대해 자세히 알아보기
클러스터 인스턴스는 Placement Group 내에서 시작할 수 있습니다. Placement Group에서 시작된 모든 인스턴스는 지연 시간이 짧고, 인스턴스 간 양방향 대역폭이 10Gbps입니다. 다른 Amazon EC2 리소스와 마찬가지로, Placement Group 또한 동적이며 필요에 따라 탄력적으로 확장 가능합니다. 여러 Placement Group을 연결하여 대규모 병렬 처리 작업을 위한 대용량 고성능 컴퓨팅 클러스터를 구축할 수도 있습니다.
Placement Group에 대해 자세히 알아보기
향상된 네트워킹에 대해 자세히 알아보기
AWS는 현재 C3 및 I2 인스턴스 유형에 대해 SR-IOV(단일 루트 I/O 가상화)를 사용하여 향상된 네트워킹 기능을 지원합니다. SR-IOV는 일반 구현에 비해 높은 I/O 성능 및 낮은 CPU 사용률을 제공하는 디바이스 가상화 방법입니다. 이 기능을 사용하면 지원되는 Amazon EC2 인스턴스의 PPS(Packet Per Second) 성능이 높아지고, 인스턴스 간 지연 시간이 낮아지며, 네트워크 지터가 매우 낮아집니다.
데이터세트가 커질수록 지연 시간을 감소시키고 처리량을 늘리기 위해서는 데이터에 더 많은 컴퓨팅을 할당하는 것이 가장 손쉬운 방법입니다. Amazon S3, Amazon Redshift, Amazon DynamoDB, Amazon RDS 같은 AWS 빅 데이터 스토리지 및 데이터베이스 서비스는 고성능 컴퓨팅 클러스터에 대한 데이터를 호스팅하기에 이상적입니다. 이뿐만 아니라, Amazon Elastic Block Store(EBS)를 통해 HPC 워크로드의 대규모, 고성능, 높은 처리량이라는 요구 사항을 충족하는 대규모 병렬 파일 시스템을 생성할 수 있습니다.
사용자는 HPC 워크로드에 대해 스팟 인스턴스를 활용하여 시간과 비용을 절감할 수 있습니다. 스팟 인스턴스는 사용하지 않은 Amazon EC2 용량에 대해 사용자가 원하는 요금으로 입찰할 수 있도록 하는 요금 모델입니다. 사용자가 스팟 가격을 초과하는 가격으로 입찰하는 경우, 사용 가능한 스팟 인스턴스에 액세스할 수 있으며 입찰이 스팟 가격을 초과하는 한은 계속하여 실행할 수 있습니다. 일반적으로 스팟 요금은 온 디맨드 요금에 비해 50%~93% 가량 낮습니다.
AWS Marketplace는 개발자와 IT 전문가가 AWS 클라우드에서 실행되는 소프트웨어를 간편하게 찾아서 사용할 수 있도록 도와주는 온라인 상점입니다. 몇 번의 클릭만으로 AWS Marketplace에서 Univa Grid Engine 리소스 관리 시스템이나 인텔 러스터 HPC 파일 시스템 같이 클러스터에서 실행할 수 있는 다양한 고성능 컴퓨팅 소프트웨어를 바로 찾을 수 있습니다.
AWS Marketplace에서 HPC 소프트웨어 보기
