Airflow · A09

AI에게 DAG를 맡기고 검증하기

Claude Code, Codex, Cursor 같은 코딩 AI는 DAG 초안을 빠르게 써 줍니다. 대신 학습 데이터에 Airflow 2 예제가 많아 옛 문법을 섞기 쉽습니다. 요청할 때 버전을 못 박고, 받은 뒤에는 정해진 순서로 확인합니다.


요청 문장

버전, 문법, 재시도, 중복 방지, 확인 방법을 처음부터 적어 주면 고칠 일이 크게 줄어듭니다. 괄호 안만 내 상황에 맞게 바꿔 쓰세요.

Apache Airflow 3.4로 DAG를 하나 만들어줘. (공공데이터 API 주소와 받을 항목)을 (매일 오전 7시, 서울 시간)에 받아서 (저장할 곳)에 저장하는 DAG야. 조건: 1) from airflow.sdk import dag, task 를 쓰는 TaskFlow 문법으로, schedule_interval이나 airflow.datasets 같은 Airflow 2 문법은 쓰지 마. 2) start_date는 pendulum으로 Asia/Seoul 시간대를 넣어. 3) 받기·확인·저장 세 태스크로 나누고, 확인 단계에서 행 수가 기준보다 적으면 일부러 실패시켜. 4) 저장은 같은 날짜를 다시 돌려도 중복이 쌓이지 않게 해. 5) 외부 호출 태스크에는 retries 2번, 간격 1분. 6) 계산 로직은 DAG 밖 함수로 빼. 다 쓰면 airflow dags test 로 확인하는 명령도 알려줘.

받은 DAG를 확인하는 순서

1

파일이 읽히는지: dags 폴더에 넣고 airflow dags list-import-errors가 비어 있는지 봅니다.

2

옛 문법이 없는지: ruff check dags/ --select AIR301,AIR302 --preview와 grep -n "execution_date\|schedule_interval" dags/*.py.

3

실제로 도는지: airflow dags test DAG이름을 실행하고 로그에서 결과 건수를 확인합니다.

4

두 번 돌려도 같은지: 같은 날짜로 한 번 더 돌린 뒤 저장된 행 수가 늘지 않았는지 셉니다.

5

시간이 맞는지: 화면의 "다음 실행"이 내가 원한 한국 시간인지 봅니다.

오류가 나면 이렇게 돌려줍니다

방금 만든 DAG를 airflow dags test 로 돌렸더니 아래 오류가 났어. 원인을 한 줄로 설명하고, Airflow 3.4 문법을 유지한 채 고친 파일 전체를 다시 줘. 고친 부분은 주석으로 표시해 줘. (오류 로그 붙여 넣기)

💡 DuckDB 2.0 CLI처럼 일부 데이터 도구는 코딩 AI가 실행하는 것을 감지해 출력을 짧게 줄여 줍니다. AI에게 결과 확인까지 맡길 때는 출력이 짧은 명령(건수, 합계)을 쓰게 하면 읽는 양이 줄어듭니다.

이것만 기억하세요

요청할 때 "Airflow 3.4, airflow.sdk, Asia/Seoul, 중복 방지"를 적고, 받은 뒤에는 읽히는지 → 옛 문법 → 실제 실행 → 두 번 실행 → 시간 순으로 확인합니다.

다음
A10. 운영 방식과 도구 고르기
이어보기 →