Airflow · A06

Asset으로 DAG를 잇기

"날씨 저장이 끝나면 요약을 만든다"처럼 한 DAG의 결과가 다른 DAG의 출발 신호가 되게 합니다. 시간을 맞춰 두는 대신, 데이터가 갱신됐다는 사실로 다음 DAG를 돌립니다.


시간으로 잇기와 데이터로 잇기

시간으로

수집 9시, 요약 9시 30분

  • 수집이 40분 걸린 날은 요약이 어제 데이터로 돕니다
  • 수집이 실패해도 요약은 돕니다
Asset으로

수집이 저장을 마치면 요약

  • 저장이 성공해야만 요약이 돕니다
  • 수집이 늦어지면 요약도 그만큼 늦게 돕니다

두 줄만 추가합니다

A05장 파일에 이미 들어 있습니다. 저장하는 태스크에 outlets로 Asset을 달고, 받는 DAG의 schedule에 같은 Asset을 적습니다. Asset의 이름(URI)은 실제 주소일 필요는 없고, 두 DAG가 같은 문자열을 쓰면 됩니다.

weather_table = Asset("duckdb://weather/seoul_hourly")

@task(outlets=[weather_table])        # 이 태스크가 성공하면 "갱신됨" 이벤트를 남김
def save(rows): ...

@dag(schedule=[weather_table], ...)   # 이벤트가 생기면 실행
def seoul_weather_report(): ...

수집 DAG를 한 번 실행하자 요약 DAG가 asset_triggered__...라는 이름으로 자동 실행됐고, 로그에 아래처럼 찍혔습니다.

2026-11-22 최저 -4.2도 / 최고 4.2도 / 강수 0.0mm
2026-11-23 최저 1.7도 / 최고 12.7도 / 강수 12.8mm
에셋 목록
왼쪽 메뉴의 에셋 화면: 어떤 DAG가 이 데이터를 만들고(생성 중인 태스크) 어떤 DAG가 기다리는지(스케줄 된 Dags)가 한 줄에 보입니다.

💡 Airflow 2에서는 같은 기능을 Dataset이라고 불렀습니다. 3에서 이름이 Asset으로 바뀌었고, 3.4에서는 from airflow.datasets import Dataset을 쓰면 파일을 불러오지 못합니다(A08장).

이것만 기억하세요

앞 DAG의 결과가 다음 DAG의 재료라면 시간 대신 Asset으로 잇습니다. 저장 태스크에 outlets, 받는 DAG의 schedule에 같은 Asset을 적습니다.

다음
A07. Task Loops와 AI 작업
이어보기 →