Amazon EMR에서 Trino와 Apache Superset을 이용한 Federated Query 하기

이 글은 여러 데이터 소스에 대한 단일 쿼리 플랫폼 구축을 목표로 하는 기업들을 위해 Amazon EMR, Trino, Apache Superset, Apache Ranger를 활용한 Federated Query 아키텍처를 소개합니다. Data Fabric 및 Data Mesh 아키텍처의 목표와 함께, 이 솔루션은 클라우드, 온프레미스, 멀티 클라우드에 분산된 데이터에 대한 쉬운 접근과 비즈니스 인사이트 도출을 지원합니다.

특히, EMR Ranger Trino Plugin을 활용하여 데이터 보안 및 거버넌스를 강화하면서 Apache Superset을 SQL UI로, Trino를 통합 쿼리 엔진으로 사용하는 방법을 설명합니다. 또한, 기존 AWS CloudFormation Stack 배포 오류 수정 및 Application Load Balancer를 통한 EMR Application UI 접근 방법도 다룹니다.