Prefect

이 글은 머신러닝 워크플로우 관리를 돕는 워크플로우 관리 시스템인 Prefect를 소개하고 사용법을 안내합니다. Prefect는 Luigi나 Airflow와 같은 기존 시스템의 불편함을 느낀 사용자들에게 대안으로 제시됩니다.

글에서는 Prefect의 아키텍처 개요를 설명하고, 사용자가 직접 Prefect 서버를 로컬 환경에 구축하여 간단한 머신러닝 워크플로우를 구성하는 과정을 코드를 통해 보여줍니다. Prefect는 사용자가 정의한 작업을 Flow 형태로 등록하고, Agent를 통해 실행하며, Prefect 서버 UI로 상태를 관리하는 구조를 가집니다.

Prefect Cloud 서비스도 언급되지만, 직접 서버를 실행하는 방식을 중심으로 설명합니다. 머신러닝 기초 지식이 있으면 이해에 도움이 되지만 필수는 아닙니다.

7 환경을 기준으로 작성되었습니다. Python 3.6.7 환경을 기준으로 작성되었습니다.