실행은 도메인별로, 문맥은 한 레포에
스토리 · 토스 테크 · 2026.10.16
토스 Data Warehouse 팀이 기존의 중앙 집중식 Airflow 시스템을 도메인별 클러스터와 dbt 기반의 선언적 파이프라인으로 전환한 '뉴타운' 프로젝트 과정을 소개합니다. Strangler Fig 방식을 사용하여 기존 시스템을 중단 없이 운영하면서, 데이터 의존성을 코드로 관리하고 메타데이터를 yml 파일로 구조화했습니다. 이를 통해 DAG 코드의 복잡도를 획기적으로 줄였을 뿐만 아니라, AI 에이전트가 데이터의 맥락(Context)을 정확히 파악할 수 있는 환경을 구축하여 데이터 활용도를 높인 사례를 담고 있습니다.