AWS, 고성능·저지연 클라우드 객체 스토리지 ‘아마존 S3 익스프레스 원 존’ 정식 공개
아마존웹서비스(AWS)는 ‘AWS 리인벤트 2023(AWS re:Invent 2023)’ 이벤트에서 ‘아마존 S3 익스프레스 원 존(Amazon Simple Storage Service Express One Zone)’을 공개했다. 아마존 S3 익스프레스 원 존은 지연 시간에 민감한 고객의 애플리케이션에 한 자리 수 밀리초의 일관된 데이터 액세스를 제공하기 위해 설계된 고성능 단일 영역 아마존 S3 스토리지 클래스다.
아마존 S3 익스프레스 원 존은 지연 시간이 짧은 클라우드 객체 스토리지로, AWS 리전 내의 모든 AWS 가용 영역에서 표준 아마존 S3 보다 최대 50% 낮은 요청 비용으로 최대 10배 빠른 데이터 액세스 속도를 제공한다. 까다로운 워크로드의 경우, 고객은 컴퓨팅 리소스와 동일한 AWS 가용 영역에 아마존 S3 익스프레스 원 존 데이터를 배치해 컴퓨팅 성능과 비용을 최적화하는 동시에 데이터 처리 속도를 높일 수 있다.
AWS의 클라우드 스토리지 서비스인 아마존 S3는 350조 개 이상의 객체를 보관하고 있으며 초당 평균 1억 건 이상의 요청을 처리한다. 하지만 ML 훈련 및 추론, 대화형 분석, 재무 모델 시뮬레이션, 실시간 광고, 미디어 콘텐츠 제작과 같은 새로운 사용 사례에서는 분당 수백만 번 데이터를 쓰고 액세스할 수 있으며, 성능 요구 사항을 충족하기 위해 일관된 한 자릿수 밀리초의 응답 시간이 필요하다.
예를 들어, 인공지능(AI) 및 ML 모델 학습에는 수백만 개의 이미지와 텍스트 한 줄을 몇 분 안에 처리해야 하는 경우가 많다. 성능이 중요한 애플리케이션의 스토리지 지연 시간, 애플리케이션 실행 시간, 컴퓨팅 비용을 줄이기 위해 고객들은 자주 액세스하는 데이터를 아마존 S3에서 맞춤형 캐싱 솔루션으로 옮기는 추세다. 그러나 이렇게 솔루션을 옮기면 복잡성이 증가하고 운영 부담이 커지며, 여러 API 세트를 사용하는 추가 스토리지 인프라를 유지해야 하므로 애플리케이션 수정이 필요하다. 또한 데이터가 인스턴스에 복사되는 동안 컴퓨팅 인프라가 실행되어야 하므로 유휴 컴퓨팅 시간이 발생하여 비용이 증가하고 비효율이 발생할 수 있다.
이번에 발표된 아마존 S3 익스프레스 원 존은 새로운 고성능 스토리지 클래스로, 머신러닝(ML) 트레이닝 및 추론, 대화형 분석, 미디어 콘텐츠 제작과 같은 요청 집약적인 작업을 위한 고성능의 스토리지 클래스다. 아마존 S3 익스프레스 원 존을 통해 고객은 필요에 따라 스토리지를 확장하거나 축소할 수 있으며, 현재 사용 중인 아마존 S3 API(Amazon S3 API)로 작업할 수 있다.
또한 전용 하드웨어와 소프트웨어에 데이터를 복제하고 저장함으로써 아마존 S3 스탠다드(Amazon S3 Standard)보다 최대 10배 빠른 액세스 속도를 제공하여 데이터 처리 속도를 높인다. 아마존 S3 익스프레스 원 존은 액세스 속도를 더욱 높이고 분당 수백만 건의 요청을 지원하기 위해 새로운 버킷 유형인 아마존 S3 디렉토리 버킷에 데이터를 저장한다.
아마존 S3 익스프레스 원 존을 사용하면 데이터 액세스 속도가 아마존 S3 스탠다드보다 최대 10배 빠르다. 따라서 데이터 레이크 쿼리가 최대 4배 더 빠르게 완료되어 분석에 소요되는 워크로드 시간이 단축되므로 데이터 분석가가 인사이트를 도출하고 더 빠르게 의사 결정을 내릴 수 있다. 아마존 S3 익스프레스 원 존을 통해 고객은 스토리지를 확장하거나 축소할 수 있으며, 애플리케이션이 현재 사용되는 것과 동일한 아마존 S3 API를 통해 데이터에 액세스하기 때문에 지연 시간이 짧은 워크로드를 위해 여러 개의 스토리지 시스템을 관리할 필요가 없다.
고객은 몇 번의 클릭만으로 새로운 아마존 S3 디렉토리 버킷(Amazon S3 directory bucket)을 생성하고, 생성한 아마존 S3 디렉토리 버킷에 직접 새 개체를 업로드하거나, AWS 관리 콘솔의 아마존 S3 배치 작업을 사용하여 다른 아마존 S3 스토리지 클래스에 있는 기존 데이터 세트의 개체를 복사할 수 있다. 아마존 S3 익스프레스 원 존은 아마존 S3용 마운트 포인트(Mountpoint for Amazon S3), 아마존 S3 서버사이드 암호화(Amazon S3 Server-Side Encryption), 아마존 S3 블록 퍼블릭 액세스(Amazon S3 Block Public Access)와 같은 아마존 S3 기능뿐만 아니라 아마존 EMR(Amazon EMR), 아마존 레드시프트(Amazon Redshift), 아마존 세이지메이커(Amazon SageMaker), 아마존 베드록(Amazon Bedrock)과 같은 AWS 서비스도 지원한다. 아마존 S3 익스프레스 원 존은 미국 동부(노던 버지니아), 미국 서부(오레곤), 유럽(스톡홀름), 아시아 태평양(도쿄)에서 사용할 수 있으며, 곧 추가 AWS 리전에서도 사용 가능하다.
AWS의 제임스 키르쉬너(James Kirschner) 아마존 S3 제너럴 매니저는 “수백만 명의 고객이 저비용 아카이브 스토리지에서 페타바이트 규모의 데이터 레이크에 이르기까지 모든 용도로 아마존 S3를 사용하고 있으며, 매 밀리초가 중요한 가장 성능 집약적인 애플리케이션을 지원하기 위해 사용을 확대하고자 한다”면서, “아마존 S3 익스프레스 원 존은 지연 시간에 가장 민감한 애플리케이션에 가장 빠른 데이터 액세스 속도를 제공하며, 고객이 액세스 빈도가 높은 데이터 세트에 대해 분당 수백만 건의 요청을 처리하는 동시에 요청 및 컴퓨팅 비용을 절감할 수 있도록 지원한다”고 설명했다.
정수진
작성일 : 2023-12-06
조회수 : 135