Airflow Task failed Alert Mail 폭탄 회피하기

본 글은 G플레이스데이터개발팀에서 Airflow 사용 중 겪었던 과도한 Task failed Alert mail 발송 문제를 해결한 경험을 공유합니다. Airflow는 배치 워크플로우 관리에 유용한 오픈소스 프레임워크이지만, 한 DAG 내 여러 Task가 동시에 실패할 경우 실패 횟수만큼 알림 메일이 발송되어 노이즈가 발생하는 문제가 있었습니다.

이러한 알림 폭탄은 실제 중요한 알림을 놓치게 할 수 있습니다. 필자는 이 문제를 해결하기 위해 특정 조건에서만 알림을 발송하도록 설정을 변경하는 방식을 적용했습니다.

이를 통해 불필요한 알림을 줄이고, 실제 장애 대응에 집중할 수 있는 환경을 구축했습니다. 이 글은 Airflow를 사용하는 다른 팀에게도 유용한 문제 해결 사례가 될 것입니다.