효성인포메이션시스템이 국내 AI서비스 기업 업스테이지의 AI 교육·학습 모델 테스트 환경을 위한 HPC 인프라 구축 프로젝트에 초고성능 병렬 파일 스토리지 ‘HCSF(Hitachi Content Software for File)’를 공급했다고 8일 전했다.

업스테이지는 카카오톡에서 130만명이 활용하는 국민 챗AI ‘AskUp'을 비롯해 광학문자인식(OCR) 기반 문서 AI 솔루션 '다큐먼트 AI팩', 챗봇과 검색-추천 기술로 초개인화된 솔루션을 제공하는 '애스크업 서제스트(AskUP Seargest)' 등을 서비스하고 있다. 

최근에는 자체 구축한 대규모언어모델(LLM)이 메타, 마이크로소프트(MS) 등 빅테크의 모델을 제치고 '허깅페이스 오픈LLM 리더보드'에서 세계 1위의 성능을 보여 화제가 됐다.

업스테이지는 주요 사업 중 하나인 AI 전문 교육 프로그램 운영을 위해 효성인포메이션의 초고성능 병렬 파일 스토리지 HCSF를 도입했다. 업스테이지는 HCSF를 활용해 고성능 컴퓨팅(HPC) 환경을 구현하고 안정적으로 서비스를 운영 중이다. 

업스테이지는 관계자는 “수십 대 GPU 환경 구현을 위한 스토리지로 HCSF를 채택하고 인피니밴드(InfiniBand)로 네트워크 환경을 구성하며 AI 교육 서비스 효과를 극대화하기 위한 최상의 인프라를 구축했다”고 설명했다.

업스테이지는 GPU 서버 활용한 성능 극대화를 위해 HCSF를 SSD NVMe 환경으로 구성해 입출력(I/O) 병목현상을 없애고 GPU 서버와 스토리지 간 직접 연결을 위한 GPU 다이렉트 기술(GDS)로 응답 성능도 최적화했다. 

이외 CSI(Container Storage Interface Plug-in)를 통한 컨테이너 기반 관리로 스토리지 볼륨 운영을 최적화하고 효율성을 높였다.

HCSF는 초고성능 병렬 파일 시스템과 오브젝트스토리지가 통합된 파일 스토리지다. 오브젝트스토리지의 가용성과 클라우드 기능을 갖추면서도 분산 파일 시스템 속도를 제공하고 파일과 오브젝트 프로토콜을 지원해 데이터 수집이 용이한 점이 특징이다.

업스테이지 박재권 인프라 팀장은 "HCSF를 통해 AI 환경에 최적화된 HPC 인프라를 성공적으로 구현하고, 운영과 관리가 쉬워 최소 운영 인력으로 편리하게 사용하고 있다"며 "업스테이지는 AI 대전환 시대 최고의 AI 관련 기술력을 구현할 수 있도록 인프라 혁신에도 최선을 다할 것”이라고 밝혔다.

효성인포메이션시스템 양정규 대표는 “국내 대표 AI 서비스 기업 업스테이지와의 성공적인 구축사례를 기반으로 AI 시대에 최적화된 HPC 인프라 환경 구축을 희망하는 고객사에게 솔루션을 제시할 것”이라고 밝혔다.