넷앱, 어려운 AI 데이터 관리 '지능형 인프라'로 해결

넷앱이 인공지능(AI) 복잡성 해결을 위한 지능형 데이터 인프라 혁신 방안을 공개했다.

넷앱은 글로벌 컨퍼런스 ‘넷앱 인사이트 2024’에서 넷앱 온탭(NetApp ONTAP) 기반 AI 기술 지원 방안을 발표했다고 2일 밝혔다.

넷앱은 AFF A90 플랫폼에서 엔비디아 DGX 슈퍼포드 AI 인프라를 탑재한 넷앱 온탭 스토리지의 엔비디아 인증 프로세스를 시작했다. 이를 통해 기업이 대규모 AI 프로젝트에서 데이터 관리 기능을 활용할 수 있도록 지원한다.

이 인증은 엔비디아 DGX 베이스포드(NVIDIA DGX BasePOD)와의 기존 넷앱 온탭 인증을 보완하며 발전시킨다. NetApp ONTAP은 대규모 언어 모델(LLM)의 데이터 관리 문제를 해결해 AI 학습 워크로드에 대한 데이터 관리의 어려움을 개선한다.

글로벌 메타데이터 네임스페이스 생성으로 고객사의 하이브리드 멀티 클라우드 환경 전반에서 데이터를 안전하고 규정을 준수하는 방식으로 탐색하며 관리해 AI 기능 추출 및 데이터 분류를 가능하게 한다.

넷앱은 별도로 엔비디아 AI 소프트웨어와의 새로운 통합을 발표했으며, 해당 통합을 통해 ONTAP과 함께 글로벌 메타데이터 네임스페이스를 활용해 에이전틱 AI를 위한 검색 증강 생성(RAG)을 가능하게 한다.

직접 통합된 AI 데이터 파이프라인을 통해 온탭은 비정형 데이터를 AI에 맞게 자동으로 준비시킬 수 있으며, 고객 데이터 세트의 점진적인 변경 사항을 캡처하고, 정책 기반 데이터 분류 및 익명화를 수행하며, 고도로 압축 가능한 벡터 임베딩을 생성해 온탭 데이터 모델과 통합된 벡터 DB에 저장하여 대규모, 저지연 의미 검색 및 검색 증강 추론을 위한 준비를 갖춘다.

디스어그리게이티드 스토리지 아키텍처는스토리지 백엔드 공유를 가능하게 지원해 네트워크와 플래시 속도의 활용을 극대화하고 인프라 비용을 절감하는 아키텍처다. 이를 통해 대규모 언어 모델 학습과 같은 대규모, 컴퓨팅 집중적인 AI 워크로드에서 성능을 크게 향상시키면서 랙 공간과 전력을 절약할 수 있다.

이 기능은 디스어그리게이티드 스토리지 아키텍처의 이점을 제공하면서도 온탭의 검증된 복원력, 데이터 관리, 보안 및 거버넌스 기능을 유지할 수 있도록 지원한다.

모든 네이티브 클라우드 서비스 전반에서 데이터 수집, 탐색 및 카탈로그화할 수 있는 통합 및 중앙 집중식 데이터 플랫폼을 제공하기 위해 노력하고 있다.

또한 넷앱은 클라우드 서비스를 데이터 웨어하우스와 통합하고 데이터를 시각화, 준비 및 변환할 수 있는 데이터 처리 서비스를 개발하고 있다. 이렇게 준비된 데이터세트는 서드 파티 솔루션을 포함한 클라우드 제공업체의 AI 및 머신러닝 서비스와 안전하게 공유되고 사용될 수 있다.