DevOpsTrino resource optimizes on YARN
플레이스데이터플랫폼 팀은 YARN 클러스터에 배포된 Trino 클러스터의 리소스 구성을 최적화하여 장비 증설 없이 클러스터 가용 메모리를 약 40% 증가시켰습니다. Place Data Lake House(PDL)는 Iceberg 테이블로 데이터를 적재하며, Kafka, HDFS, Tableau 등 다양한 방식으로 활용됩니다. Trino는 Interactive Query에 특화되어 사용량이 증가하고 있어, 리소스 구성 점검 및 최적화가 필요했습니다. 이 글에서는 Trino의 리소스 설정을 이해하고 기존 설정을 순차적으로 최적화한 과정을 공유합니다.
TrinoYARN리소스 최적화
네이버플레이스·2024년 11월 26일
