SAS Grid, 클라우드 이전의 새로운 지평을 열다
지난 20년간 헬스케어, 신약 개발, 금융 서비스 등 다양한 산업 분야에서 SAS Grid는 복잡하고 방대한 분석 워크로드를 처리하는 핵심 솔루션으로 자리매김해왔습니다.
SAS Grid Manager로도 알려진 이 엔터프라이즈 소프트웨어 플랫폼은 여러 서버 클러스터에 걸쳐 대규모 분석 작업을 분산하고 관리하며, 마치 항공 교통 관제사처럼 수많은 작업을 효율적으로 처리합니다.
그러나 이러한 강력한 성능을 유지하면서도 기존의 온프레미스(On-premises) 환경을 클라우드로 이전하는 것은 성능 저하 및 비용 상승에 대한 우려를 동반하는 어려운 과제였습니다.
오늘날, Amazon Web Services(AWS)의 스토리지 혁신은 이러한 레거시 SAS Grid 환경을 클라우드로 이전하는 것을 전례 없이 비용 효율적으로 만들고 있습니다.
온프레미스 SAS Grid의 한계와 클라우드 이전의 필요성
SAS Grid를 온프레미스에서 운영하려면 상당한 하드웨어 투자와 전문적인 기술 지원이 필수적입니다.
페타바이트 규모로 확장되는 데이터셋을 처리하기 위해서는 지속적인 용량 확장 및 성능 유지를 위한 자본 지출이 불가피하며, 스토리지 프로비저닝, 용량 계획, 재해 복구, 인프라 유지 보수 등 운영 부담 또한 만만치 않습니다.
이러한 운영상의 부담은 혁신적인 이니셔티브에 투입되어야 할 귀중한 리소스를 소모시킵니다.
클라우드 이전은 당연한 해결책으로 보이지만, 기존의 고성능 워크로드에 대한 클라우드 스토리지 옵션은 주로 고가의 올-SSD 솔루션에 국한되어 왔습니다.
이는 특히 빈번하게 액세스하는 데이터와 그렇지 않은 데이터를 모두 포함하는 멀티 페타바이트 규모의 데이터셋을 가진 조직에게 클라우드 이전의 경제성을 떨어뜨리는 요인이었습니다.
Amazon FSx for Lustre Intelligent-Tiering의 등장
새롭게 출시된 Amazon FSx for Lustre Intelligent-Tiering은 SAS Grid와 같이 빈번하게 액세스하는 데이터(Hot Data)와 그렇지 않은 데이터(Cold Data)가 혼합된 워크로드를 위한 스토리지 비용 구조를 혁신적으로 변화시킵니다.
이 혁신적인 스토리지 솔루션은 모든 데이터에 대해 일관된 올-SSD 성능이 필요하지 않은 워크로드에 최적화되어 있으며, 기존의 관리형 Lustre 옵션 대비 최대 96%까지 액세스가 적은 데이터에 대한 스토리지 비용을 절감할 수 있습니다.
월 GB당 0.005달러 미만의 시작 가격으로, SAS Grid 클라우드 이전의 경제성을 획기적으로 향상시키는 가격-성능 특성을 제공합니다.
FSx Intelligent-Tiering, 스마트한 데이터 관리의 비밀
FSx Intelligent-Tiering의 핵심 가치는 자동화된 데이터 관리에 있습니다.
사용자의 수동 개입 없이 데이터는 액세스 패턴에 따라 세 가지 스토리지 계층 간에 원활하게 이동합니다:
- Frequent Access Tier: 최근 30일 이내에 액세스된 데이터는 이 계층에 유지됩니다.
- Infrequent Access Tier: 30~90일 동안 액세스되지 않은 데이터는 자동으로 이 계층으로 이동하며, Frequent Access Tier 대비 44%의 비용 절감을 제공합니다.
- Archive Tier: 90일 이상 액세스되지 않은 데이터는 이 계층으로 마이그레이션되어 Infrequent Access Tier 대비 65%의 비용 절감을 실현합니다.
데이터가 어떤 계층에 있든, 검색 시간은 수십 밀리초 이내로 즉시 액세스 가능합니다.
이는 SAS Grid 애플리케이션이 수정 없이 모든 계층의 데이터에 투명하게 액세스하면서 계속 실행될 수 있음을 의미합니다.
분석 데이터셋은 고성능 스토리지에 유지되고, 과거 데이터는 저비용 스토리지로 이동하며, 참조 데이터는 사용량에 따라 자동 계층화되고, 계절적 또는 주기적 워크로드는 동적 계층화를 통해 이점을 얻습니다.
탄력적인 스토리지, 필요에 따라 무한 확장
사전 용량 프로비저닝이 필요한 기존 스토리지 시스템과 달리, FSx for Lustre Intelligent-Tiering은 완전한 탄력성을 제공합니다.
파일 시스템은 사실상 무제한의 공간을 제공하며, 사용자는 저장하는 데이터에 대해서만 비용을 지불합니다.
이는 조직이 향후 성장을 위해 미리 용량을 구매해야 하는 기존 온프레미스 스토리지의 고비용 초과 프로비저닝 문제를 해결합니다.
SAS Grid 워크로드에 있어 이러한 탄력성은 혁신적입니다.
수 기가바이트의 실험 데이터로 시작하여, 스토리지 관리 오버헤드나 용량 계획 없이도 페타바이트 규모의 프로덕션 데이터셋으로 원활하게 확장할 수 있습니다.
워크로드 요구사항에 완벽히 부합하는 성능
FSx for Lustre Intelligent-Tiering은 SAS Grid의 까다로운 요구사항을 완벽하게 충족하는 인상적인 성능 특성을 제공합니다:
- 처리량: 최대 2TiB/s의 처리량 프로비저닝이 가능합니다.
- IOPS: 수백만 IOPS의 쓰기 및 캐시된 읽기 성능을 제공합니다.
- 지연 시간: 선택적 SSD 읽기 캐시의 경우 밀리초 미만의 지연 시간, 기타 데이터의 경우 수십 밀리초의 지연 시간을 제공합니다.
특히 선택적 SSD 읽기 캐시는 SAS Grid 워크로드의 지연 시간에 민감한 부분에 매우 유용합니다.
이는 처리량에 따라 자동으로 확장되거나 성능 요구사항에 따라 독립적으로 또는 수동으로 조정될 수 있어, HDD 가격으로 SSD 수준의 성능을 필요한 곳에 구현할 수 있습니다.
압도적인 가격-성능 비율, 실질적 이점
FSx for Lustre Intelligent-Tiering은 온프레미스 HDD 파일 스토리지 대비 최대 34%, 클라우드의 다른 고성능 파일 시스템 대비 최대 70% 향상된 가격-성능 비율을 제공합니다.
이는 SAS Grid 환경을 클라우드로 이전하는 조직에게 애플리케이션 성능을 유지하거나 향상시키면서 상당한 비용 절감을 가져다줍니다.
Smartronix와 T-Mobile과 같은 기업들은 FSx for Lustre를 사용하여 SAS Grid를 AWS로 이전한 결과, SAS 애플리케이션 실행 시간을 50% 이상 단축하는 놀라운 성능 향상을 경험했으며, 이는 코드 변경 없이 달성되었습니다.
이러한 성능 향상은 최신 Amazon EC2 컴퓨팅 인스턴스와 FSx for Lustre의 높은 대역폭이 결합된 결과입니다.
Lustre 파일 시스템은 SAS 워크로드의 특징인 대용량, 순차 I/O 패턴에 최적화되어 컴퓨팅 리소스를 최대한 활용하는 처리량과 IOPS를 제공합니다.
SAS Grid 워크로드를 클라우드로 이전하는 것은 더 이상 성능 저하나 비용 상승에 대한 걱정거리가 아닙니다.
Amazon FSx for Lustre Intelligent-Tiering은 비용 효율성과 고성능을 동시에 충족시키며, 복잡한 분석 워크로드를 클라우드 환경에서 성공적으로 운영할 수 있도록 지원하는 강력한 솔루션입니다.
이제 여러분의 조직도 클라우드 기반 SAS Grid 환경을 통해 혁신을 가속화할 시점입니다.