당근 데이터 디스커버리 구축기: DataHub와 DataWiki로 여는 데이터 탐색의 첫걸음

당근 데이터 가치화 팀은 데이터 기반 의사결정을 위해 데이터 디스커버리 환경 구축의 필요성을 느꼈습니다. 데이터의 존재 여부, 의미, 관리 주체 등을 파악하기 어려운 문제를 해결하고자 했습니다.

이를 위해 메타데이터 수집, 저장, 관리가 용이하고 탐색이 쉬운 환경을 목표로 삼았습니다. 첫 번째 해결책으로 오픈소스 플랫폼인 DataHub를 도입하여 메타데이터 정보의 수집 및 관리를 자동화하고, 두 번째 해결책으로 당근만의 DataWiki를 개발하여 메타데이터 SSOT(Single Source of Truth)를 구축했습니다.

이 과정을 통해 데이터 탐색의 효율성을 높이고 데이터 신뢰도를 향상시키는 것을 목표로 합니다.