빅데이터 다차원 분석 플랫폼, Kylin

이 글은 대규모 데이터에서 실시간 다차원 분석을 지원하는 Apache Kylin 플랫폼을 소개합니다. 네이버는 기존 Elasticsearch 기반 통계 서비스에서 발생하는 다양한 디멘션 조합 질의에 대한 수요 증가에 대응하기 위해 Kylin을 테스트했습니다.

Kylin은 Hadoop 에코 시스템 기반으로 SQL 기반의 대규모 데이터 분석과 다차원 분석을 지원하며, 데이터 큐브 방식을 통해 질의 결과를 미리 생성하여 빠른 응답 속도를 제공합니다. eBay에서 개발된 Kylin은 증가하는 데이터 처리량, 느린 응답 속도, 확장성 부족 등의 문제를 해결하기 위해 데이터 큐브 방식을 채택했습니다.

글에서는 Kylin의 아키텍처를 간략하게 소개하며, 대규모 데이터 분석 시스템 구축에 대한 통찰을 제공합니다.