[테크월드=이광재 기자] 데이터플랫폼 전문기업 유엔넷이 대체거래소(ATS) 넥스트레이드에 자사 데이터 플랫폼 ‘타란툴라 레이크하우스’를 구축하며 금융 데이터 인프라 혁신을 이끌어내는 성과를 거뒀다고 밝혔다.
또 이번 프로젝트를 통해 넥스트레이드가 대규모 금융 데이터를 저장 중심에서 분석·활용 중심으로 전환하는 데 성공했다고 강조했다.
넥스트레이드는 하루 최대 50조원 규모의 거래를 처리하며 일평균 약 120GB, 연간 최대 40TB에 달하는 데이터를 생성한다. 기존에는 이 데이터를 테이프 기반 보관 중심으로 운영해 과거 데이터 분석과 활용에는 한계가 있었다.
데이터플랫폼 전문기업 유엔넷이 대체거래소(ATS) 넥스트레이드에 자사 데이터 플랫폼 ‘타란툴라 레이크하우스’를 구축하며 금융 데이터 인프라 혁신을 이끌어내는 성과를 거뒀다고 밝혔다. [제공=유엔넷]
유엔넷은 이러한 문제를 해결하기 위해 오픈소스 기반 통합 데이터 플랫폼 타란툴라 레이크하우스를 적용했다. 해당 플랫폼은 데이터 저장(Data Lake)과 분석(Data Warehouse)을 하나로 통합한 구조로 데이터 이동 없이 하나의 환경에서 즉시 분석과 활용이 가능하다. 이를 통해 넥스트레이드는 데이터 처리 속도와 활용도를 동시에 끌어올렸다.
유엔넷은 “컬럼 기반 압축 기술이 적용된 타란툴라 레이크하우스를 통해 넥스트레이드는 저장 공간을 최대 90%까지 줄였고 그 결과 데이터 저장 비용을 약 84% 절감했다”고 설명했다.
또 기존처럼 시스템을 증설하거나 별도의 상용 솔루션을 도입할 필요가 없어지면서 총소유비용(TCO)은 기존 대비 약 80% 절감됐다고 밝혔다.
이와 함께 대규모 이력 데이터의 집계·조인·압축 저장 효율을 중심으로 주요 상용 DB 및 클라우드 데이터 플랫폼과 비교 검증(PoC)을 수행한 결과 타란툴라 레이크하우스가 수억건에서 수십억건에 이르는 대규모 데이터 집계 및 조인 처리에서 우수한 성능을 보였다고 전했다.
유엔넷은 포스트그레(Postgre)SQL 기반의 ‘타란툴라DB’를 넥스트레이드의 매매체결 시스템, 회원사 시스템, 내부 업무 시스템 등 전사 핵심 영역에 적용했다. 이후 대규모 거래 환경에서도 장애 없이 안정적으로 운영되며 오픈소스 DB의 안정성을 입증했다.
또 유엔넷은 온프레미스와 클라우드를 결합한 하이브리드 구조를 구현했다. 민감한 금융 데이터 등 핵심 원천 데이터의 저장·통합 관리는 타란툴라 레이크하우스 기반 온프레미스 환경에서 수행하고 대규모 분석 및 AI 활용이 필요한 일부 워크로드는 클라우드 분석 플랫폼과 연계하는 하이브리드 구조를 구현했다. 이를 통해 금융권의 보안 규제를 준수하면서도 확장성과 유연성을 동시에 확보했다.
넥스트레이드는 이번 구축을 기반으로 AI 기반 데이터 분석, 데이터 판매 상품화, 실시간 인사이트 서비스 등으로 활용 범위를 확대할 계획이다. 하나의 플랫폼에서 정형·비정형 데이터를 통합 활용할 수 있는 구조를 통해 데이터 비즈니스 기반도 마련했다.
유종훈 넥스트레이드 IT부문장은 “유엔넷의 타란툴라 도입 이후 데이터를 단순히 저장하는 단계에서 벗어나 바로 분석하고 활용하는 구조로 전환했다”며 “비용은 크게 줄이면서도 데이터 분석 속도와 활용 범위는 획기적으로 확대됐다”고 말했다.
이어 “앞으로는 AI 기반 데이터 활용까지 확장해 금융 데이터 비즈니스의 새로운 모델을 만들어갈 것”이라고 밝혔다.
김주섭 유엔넷 대표는 “이번 구축 사례는 데이터 인프라가 단순 보관을 넘어 AI 자산으로 전환되는 흐름을 보여주는 대표적인 사례”라며 “타란툴라 레이크하우스를 통해 금융권에서도 오픈소스 기반 데이터 플랫폼이 충분히 안정성과 효율성을 동시에 확보할 수 있다는 점을 입증했다”고 전했다.
이어 “앞으로도 금융권을 포함한 다양한 산업에서 데이터 활용 중심의 플랫폼 전환을 적극 지원해 나갈 것”이라고 강조했다.
회원가입 후 이용바랍니다.
댓글
0