VAST Data와 슈퍼마이크로의 협력: 엔터프라이즈 AI 인프라 구축의 새로운 지평

LLM 시대가 활짝 열리면서 기업의 AI 투자 전략에도 큰 변화가 일어나고 있습니다. 관련해 과거, 현재, 미래를 모두 아우를 수 있는 AI 인프라와 데이터 플랫폼의 중요성에 대한 관심도 높아지고 있습니다. 이번 포스팅에서는 전통적인 AI/ML 워크로드와 분석 작업부터 최근 모든 기업의 최우선 과제가 된 LLM 기반 생성형 AI 챗봇과 AI 에이전트까지 유연하게 수용할 수 있는 AI 인프라와 데이터 플랫폼의 통합 아키텍처를 알아보겠습니다.

VAST Data와 슈퍼마이크로가 손을 잡은 이유

VAST Data와 슈퍼마이크로는 2023년부터 긴밀하게 통합 아키텍처 설계를 위한 협력을 해왔습니다. 양사의 협력은 엔터프라이즈 AI 및 대규모 데이터 분석 환경에서 인프라 구축과 운영 효율성을 동시에 제공하는 것을 목표로 합니다. 양사가 추구하는 통합 아키텍처는 다음 그림과 같습니다.

이 아키텍처는 고성능 컴퓨팅을 위한 슈퍼마이크로 하이퍼 서버와 AI 워크로드에 최적화된 GPU 서버, 고속 네트워크를 위한 스위치, 그리고 다양한 종류의 NVMe SSD를 포함한 슈퍼마이크로 하드웨어와 다중 테넌트 및 제로 트러스트 보안을 지원하는 갖춘 올플래시 스토리지, AI 데이터 파이프라인을 간소화하는 VAST Data InsightEngine, 그리고 AI 모델 개발 및 관리를 위한 NVIDIA NIM으로 구성됩니다.

DASE 아키텍처와 랙 스케일 솔루션의 만남

VAST Data와 슈퍼마이크로가 함께 설계한 통합 아키텍처에서 주목할 기술적 특징은 크게 두 가지로 요약할 수 있습니다. 하나는 VAST Data의 DASE(Disaggregated Shared-Everything)입니다. 이 아키텍처는 컴퓨팅과 스토리지를 분리하여 필요에 따라 독립적으로 확장할 수 있도록 합니다. 컴퓨팅 성능이 필요하면 컴퓨팅 노드만 늘리고, 저장 공간이 필요하면 스토리지 노드만 확장하여 비용과 성능의 균형을 맞출 수 있습니다. 또한, 파일, 오브젝트, 백업, AI/분석 데이터 등 다양한 워크로드를 단일 플랫폼에서 통합 처리할 수 있습니다.

두 번째는 VAST Data가 2025년에 정식으로 공개할 예정인 VAST InsightEngine입니다. 이 엔진은 은 LLM 기반 생성형 AI, AI/ML, 분석 워크로드를 단일 플랫폼에서 처리·관리할 수 있도록 설계된 소프트웨어입니다. 데이터 레이크, 벡터 검색 등 다양한 형태의 데이터 접근을 통합하여 AI 모델이 필요로 하는 정보를 빠르게 제공합니다. VAST InsightEngine은 데이터 수집, 처리, 분석/추론, 결과 활용 등 AI 파이프라인 전 과정을 단일 플랫폼에서 관리합니다. 사내 또는 외부에서 유입되는 방대한 데이터를 실시간으로 스토리지에 저장하고, 필요에 따라 데이터 전처리 과정을 자동으로 수행할 수 있습니다.

세 번째는 슈퍼마이크로의 랙 스케일 솔루션입니다. 이 솔루션은 서버, 스토리지, 네트워크, 냉각 등을 랙 단위로 사전에 통합하고 검증하여 제공합니다. 이를 통해 복잡한 하드웨어 구성과 배선을 최적화하여 설치 시 플러그 앤 플레이 방식으로 신속하게 인프라를 가동할 수 있으며, 필요에 따라 동일한 랙 블록을 추가하여 쉽게 확장할 수 있습니다.

살펴본 바와 같이 DASE의 유연한 스토리지 확장 구조와 랙 스케일의 편리한 배포 모델의 결합은 기업이 AI 인프라를 구축할 때 대규모 시스템을 쉽고 빠르게 운영할 수 있도록 지원합니다. VAST Data 플랫폼 기반의 스토리지 노드와 슈퍼마이크로 서버 기반 컴퓨트 노드의 배치가 이미 랙 스케일 형태로 설계 및 검증되어 제공되므로 대규모 프로젝트에서도 안정적이고 빠른 배포가 가능해집니다.

E-Box의 고밀도 옵션: 공간과 비용 효율 극대화

한편, VAST Data와 슈퍼마이크로의 통합 아키텍처는 단일 솔루션 형태로도 도입할 수 있습니다. 양사는 2024년 E-Box라는 합작품을 공개하였습니다. E-Box는 컴퓨팅 노드와 스토리지 노드를 하나의 박스에 통합하여 더 높은 밀도를 제공하는 하드웨어 폼팩터입니다. 슈퍼마이크로가 설계하고 생산하는 서버 형태에 VAST Data의 소프트웨어 스택을 결합하여 컴퓨팅과 스토리지가 하나의 통합 환경에서 동작하게 합니다.

E-Box는 고밀도 설계를 통해 동일한 랙에 더 많은 컴퓨팅 코어와 스토리지 용량을 집적하여 데이터센터 면적을 줄여줍니다. 또한, 전력 공급이나 냉각 수요를 효율적으로 관리하여 총 운영 비용을 낮출 수 있으며, 노드 구성 수를 줄여 관리 포인트를 축소시켜 줍니다. E-Box와 슈퍼마이크로의 랙 스케일 방식의 결합은 대규모 클러스터를 운용하는 기업에게 데이터센터의 랙 단위 밀도를 높여 컴퓨팅/스토리지 자원을 획기적으로 늘릴 수 있도록 합니다. 또한, 건물 임대료, 전력 비용 등 운영비 절감을 통해 총 소유 비용(TCO) 측면에서 상당한 이점을 누릴 수 있습니다.

더욱 간편해진 대규모 AI 인프라 구축

정리하자면 VAST DASE 아키텍처와 슈퍼마이크로 랙 스케일 솔루션의 결합을 통해 기업은 대규모 AI/분석 환경을 단시간에 안정적으로 구축할 수 있습니다. E-Box와 같은 고밀도 폼팩터를 선택하면 데이터센터 공간을 절약하고 운영비를 줄이면서 스토리지와 컴퓨팅을 동시에 확장할 수 있습니다. 더불어 VAST InsightEngine을 활용하면 AI 데이터 파이프라인 전 과정을 단일 플랫폼에서 실시간으로 처리하고, 그 결과를 즉각 업무에 활용할 수 있습니다. 이번 포스팅을 통해 간단히 살펴본 양사의 협력은 엔터프라이즈 AI 환경을 누구나 쉽고 효율적으로 운영할 수 있도록 지원하는 것을 목표로 합니다. 초기 설계부터 설치, 확장, 운영, AI 파이프라인 관리까지 전 단계에서 최적화를 이루어 조직의 규모나 업종에 따라 유연하게 확장·진화할 수 있는 환경을 제공합니다.

#대원씨티에스 #DIA #VAST_Data #VAST_DASE #EBOX #슈퍼마이크로 #InsightEngine