배스트데이터-래블업, 韓 AI 모델 개발 지원 가속

백엔드닷AI·배스트 AI 운영체제 통합…국내 GPU 클러스터 전반 자동화

배스트데이터가 래블업 손잡고 '독자 파운데이션 인공지능(AI) 모델' 개발 지원을 위한 인프라를 구축했다. 

배스트데이터는 '백엔드닷AI' 개발사 래블업과 협업해 국가 AI 컨소시엄이 대규모 언어 모델을 국내 인프라에서 직접 학습·배포할 수 있도록 데이터 기반을 구축했다고 21일 밝혔다. 

래블업은 정부가 추진하는 독자 AI 파운데이션 모델 프로젝트의 참여 기업이다. 백엔드닷AI는 그래픽처리장치(GPU)와 중앙처리장치(CPU) 자원을 아우르는 통합형 모델 학습·배포·추론 환경을 제공한다. 

배스트데이터가 래블업 손잡고 '독자 파운데이션 인공지능(AI) 모델' 개발 지원을 위한 인프라를 구축했다. (사진=배스트데이터)

이번 협력으로 백엔드닷AI에 배스트 AI 운영체제가 결합되면서 학습 데이터, 체크포인트, 모델 아티팩트를 높은 처리량과 복원력으로 관리하고 실시간 서비스까지 이어지는 데이터 흐름을 확보하도록 설계됐다.

래블업은 초거대 모델 학습에서 기존 스토리지 인프라가 요구 성능을 충족하기 어렵다고 판단해 배스트데이터를 선택했다고 밝혔다. 두 기업은 멀티테넌트 연구 환경에서 필요한 성능·통제·신뢰성을 유지하면서도 병목을 제거해 데이터 레이어를 현대화했다.

SK텔레콤 소버린 AI 클러스터에서 구동되는 백엔드닷AI·배스트 AI OS 통합 환경은 고성능 GPU 전반에 걸쳐 모델 학습을 자동화·가속화한다. 국내 연구기관은 이를 기반으로 훈련부터 추론까지 아우르는 통합 AI 컴퓨팅 환경을 확보한다.

백엔드닷AI는 배스트의 분리형 공유(DASE) 아키텍처 기반으로 컴퓨팅과 스토리지를 독립적으로 확장한다. 단일 글로벌 네임스페이스 '배스트 데이터스페이스'를 통해 연구자들은 체크포인트와 데이터셋, 출력물을 프로젝트 간 지연 없이 공유할 수 있다.

통합 환경은 소버린 데이터 통제, 고처리량 데이터 액세스, 단일 네임스페이스 제공, 안전한 멀티테넌트 확장성 등을 구현한다. 국가 컨소시엄 내부 협업은 간소화되고 GPU 전반의 일관된 성능이 확보되며, 정부·학계·기업은 독립적 확장성과 예측 가능한 품질을 보장받는다.

또 이 기반은 향후 추론·에이전틱 AI까지 대비하는 구조다. 배스트 데이터엔진은 대규모 데이터셋을 실시간으로 오케스트레이션하며, 고객이 고정형 모델 학습을 넘어 지속 학습·적응·서비스가 가능한 지능형 시스템으로 확장하도록 돕는다.

배스트 AI OS는 래블업의 자체 인프라에도 적용됐다. 이를 통해 모델 개발·테스트·오케스트레이션을 지원한다. 양사는 초기 지연 문제를 공동 엔지니어링으로 해결해 안정적이고 확장 가능한 학습 환경을 구축했다.

현재 백엔드닷AI와 배스트 AI 운영체제는 한국형 파운데이션 모델 컨소시엄에서 초거대 규모 데이터를 처리하며 대형 사전 트레이닝과 파인튜닝을 수행하는 인프라로 활용되고 있다.

알론 호레브 배스트데이터 공동 창업자 겸 최고기술책임자(CTO)는 "우리는 컴퓨트 오케스트레이션과 데이터 인텔리전스를 통합해 병목을 제거할 수 있을 것"이라며 "한국이 AI 혁신을 스스로 소유하고 통제하며 가속할 수 있는 단일 패브릭을 구축했다"고 말했다.