python - 我应该在哪里为 Airflow 创建一个包含我自己的 DAG 的文件夹？

Question

我必须在 Windows 上使用 Airflow。我是新手，所以有很多问题。

因此，我已经使用 Ubuntu 完成了教程之一中的所有步骤:

sudo apt-get install software-properties-common
sudo apt-add-repository universe
sudo apt-get update
sudo apt-get install python-pip
export SLUGIFY_USES_TEXT_UNIDECODE=yes
pip install apache-airflow

Python版本:Python2.7.15+。

我有我的/home/user_name/我在其中创建了 AirflowHome 文件夹。然后我做了:

nano ~/.bashrc
export AIRFLOW_HOME=~/home/user_name/AirflowHome (#wrote on the last string)

我跑了

airflow initdb

在/home/user_name/中。

应该在/home/user_name/AirflowHome/中这样做吗？

我也跑了:

airflow webserver -p 8080

它从未完成(可以吗？)，但它似乎可以工作，因为我能够到达主 Airflow 窗口。

我已经尝试将“dags”文件夹(带有我自己的 dags)放到

/home/user_name/airflow/
/home/user_name/AirflowHome/
/home/user_name/.local/lib/python2.7/site-packages/airflow/dag/

这些都没有在 Airflow 网络服务器上显示我的 SampleFile.py(我检查了文件中的 dag_id，没关系)。

现在我需要了解在哪里可以创建一个“dags”文件夹，我可以在其中放置所有 DAG。

如果您能帮我修复它，我将不胜感激。

Answer 1

在 airflow.cfg 中设置了 DAG 文件夹的正确路径文件(它位于 /home/user_name/AirflowHome/airflow.cfg )。查看 dags_folder参数(实际上是第一个)。

It never finished (is it alright?)

好的，可以。您可以添加-D参数在后台启动它。

顺便说一句，我记得，您还应该运行 airflow scheduler在另一个终端。