airflowWebinarSimulative
ФоркИзбранное
0
0
Описание
airflowWebinarSimulative
Языки
- Python95%
- Makefile3,5%
- Dockerfile1,5%
год назад
год назад
год назад
год назад
2 года назад
год назад
2 года назад
2 года назад
2 года назад
2 года назад
2 года назад
год назад
год назад
год назад
год назад
Simulative. Webinar: FastApi + Airflow + Postgres + Clickhouse + Minio
1. Подготовим окружение
2. Напишем сервис на FastAPI, который будет генерировать фейковых пользователей
3. Поднимем инстансы Postgres, Clickhouse, Minio и fakerApi
4. Поднимем инстанс Airflow
5. Напишем наш первый DAG
6. Напишем DAG с использованием PythonOperator, TaskGroup, XCOM
7. Напишем продолжение нашего ETL процесса с использованием Dynamic Task Mapping
8. Пушим наши наработки на удаленный репозиторий
readme.md