Airflow本机开发环境
- 安装 docker
- 安装 docker-compose
下载 docker-compose 文件 curl -LfO ‘https://airflow.apache.org/docs/apache-airflow/2.2.2/docker-compose.yaml'
创建文件夹 mkdir -p ./dags ./logs ./plugins ./config echo -e “AIRFLOW_UID=50000” > .env
初始化数据库 docker compose up airflow-init
环境清理(清除环境才需要) docker-compose down –volumes –remove-orphansdocker-compose.yaml
启动环境 docker compose up
数据库初始化 airflow db init
连接 aws 密钥创建,需要把.aws 文件夹拷贝到 docker 容器中,并且权限改为 Airflow
