Airflow

【Airflow】Apache Airflow ~ 基本編 ~

■ はじめに https://dk521123.hatenablog.com/entry/2021/07/18/004531 https://dk521123.hatenablog.com/entry/2021/07/24/233012 の続き。 Apache Airflow の基本的な構成などをメモしておく。 目次 【1】Airflow の基本構成 1)Web Server 2)Schedule…

【Airflow】Apache Airflow ~ 入門編 ~

■ はじめに https://dk521123.hatenablog.com/entry/2021/07/18/004531 の続き。 今回は、Apache Airflow に関する Hello world的なことを行ってみる。 目次 【1】参考になるサイト 【2】サンプル 【3】実行コマンド 1)コードの確認 2)DAGの確認 3)…

【Airflow】Apache Airflow ~ 環境構築編 ~

■ はじめに Amazon Managed Workflows for Apache Airflow (MWAA) っていう AWSサービスがあるのだが、その元となっている Apache Airflow を 気軽に触ってみたいので、ローカル上に環境を構築してみる 目次 【1】Apache Airflow 【2】環境構築する上での…