모든 Liner를 위한 데이터 분석 웹 인터페이스 개발기

LINE Data Labs는 2017년부터 LINE 직원들이 담당 서비스 데이터를 필요할 때 분석할 수 있는 환경을 구축해왔습니다. 이 글은 LINE Data Labs의 데이터 엔지니어 Keiji Yoshida가 데이터 분석 웹 인터페이스 개발 경험을 공유하는 내용입니다.

LINE Data Labs는 머신러닝 엔지니어, 데이터 사이언티스트, 데이터 기획자, 데이터 엔지니어 등 약 50명의 전문가가 협력하여 데이터 수집, 처리, 집계, 분석 및 BI/리포팅 서비스를 제공하며 서비스 성장을 지원합니다. 기존에는 데이터 기획자와 서비스 담당자가 KPI 및 리포트 사양을 확정하고, 데이터 엔지니어가 ETL 모듈을 개발하며, 데이터 플래너가 Cognos와 Tableau로 리포트를 만들어 제공하는 절차를 따랐습니다.

하지만 서비스 부서가 하둡 클러스터에 직접 접근할 수 없어 자유로운 데이터 분석에 제약이 있었습니다. 이에 대한 해결책으로 웹 인터페이스 개발을 통해 데이터 접근성을 높이고자 했습니다.