Airflow

원인 docker로 기존 airflow 2.4 -> 2.8로 업그레이드 후 다시 2.8 -> 2.4로 downgrade 할 때 db migration이 되지 않아 생기는 문제 Solution 1) airflow-init 시 구성 단계에서 `airflow db upgrade'를 실행해야하지만 init 단계의 time이 짧아 바로 종료 되어 버림 따라서 local 환경이라면 `airflow db migrate`로 db migrate 혹은 `airflow db upgrade`를 수행 https://airflow.apache.org/docs/apache-airflow/stable/migrations-ref.html Reference for Database Migrations — Airflow Documentat..

airflow db 초기화 오류 ---------------------------------------------------------------------------------------------------------------------- Traceback (most recent call last): File "/opt/homebrew/bin/airflow", line 5, in from airflow.__main__ import main File "/opt/homebrew/lib/python3.11/site-packages/airflow/__init__.py", line 68, in settings.initialize() File "/opt/homebrew/lib/python3.11/site-pa..

docker-compose로 구성한 container 중 airflow-init-1가 시작과 동시에 꺼지는 현상을 볼 수 있다. 이는 container 구성 중 초기화를 잘 실행하고 완료되어 꺼진 것이다. docker-compose 후 --detach가 없으면 airflow 계속 실행하기 떄문에 이를 방지하기 위함이다. https://stackoverflow.com/questions/68714224/airflow-exiting-after-initilalization Airflow exiting after Initilalization I'm trying to set up airflow instance using docker-compose in an Ubuntu EC2 Instance. After airfl..