[아이티비즈 김아라 기자] 클라우드 전문 기업 가비아(공동대표 김홍국·원종홍)가 국내 AI 반도체 기업 리벨리온의 신경망처리장치(NPU) '아톰 맥스(ATOM-Max)' 기반 클라우드 서비스 'NPUaaS'를 9일 출시했다.
NPUaaS(NPU as a Service)는 NPU 인프라를 클라우드 방식으로 구독해 사용하는 서비스다. NPU는 학습된 AI 모델을 실제 서비스에 적용하는 추론 작업에 특화된 반도체로, GPU 대비 전력 소모가 적고 비용 효율이 높아 GPU 의존도를 낮추려는 기업의 대안으로 주목받고 있다.
인스턴스(VM) 기반으로 출시된 가비아의 NPUaaS는 OS 커널 수준의 세밀한 환경 설정과 커스터마이징이 가능하다. 특정 AI 워크로드 요건에 맞는 정밀한 인프라 구성을 지원하며, 서비스 목적에 따라 유연하게 확장할 수 있다는 점이 특징이다.
가비아 NPUaaS에서 활용 가능한 아톰 맥스는 1장 기준 128 TFLOPS(FP16)의 연산 성능과 NPU 메모리 64GB, CPU 16vCore, 시스템 메모리 256GB, 무료 트래픽 4TB를 제공한다. LLM·비전 AI·멀티모달 AI·Physical AI 등 다양한 워크로드를 지원하며, 도입 규모에 따라 다중 구성도 가능하다.
가비아의 NPUaaS는 특정 AI 워크로드에 맞춰 인프라 환경을 정밀하게 제어해야 하는 기업을 주요 고객으로 한다. 대규모 LLM 서빙 등 고성능 추론 환경의 세밀한 튜닝이 요구되는 워크로드, 저지연이 요구되는 실시간 영상·음성 분석, 보안 정책상 커널 수준의 격리가 필요한 금융·의료·공공 분야 등에 특히 적합하다.
서비스 출시에 맞춰 가비아는 도입을 검토 중인 기업을 대상으로 'AI 추론 프레임워크 최적화 컨설팅'을 함께 제공한다.
정대원 가비아 상무는 "AI 서비스의 경쟁력은 모델 성능만큼이나 추론 환경의 효율성에 달려 있다"며 "NPUaaS와 전문 컨설팅을 결합해 기업이 인프라 부담 없이 AI 비즈니스에 집중할 수 있는 환경을 만들겠다"고 말했다.
댓글
0