Airflow: Взаимодействие с БД (Airflow Connections, Postgres) #8

Это восьмое видео из серии про Airflow, посвященное устройству работы с базами данных на примере Postgress. Сегодня узнаем как: • Развернуть БД в Docker для экспериментов • Настроить Airflow Connection • Реализовать DAG с SQLExecuteQueryOperator под капотом P.S. Теперь ваши данные будут течь как горная река — предсказуемо и без сбоев! Подписывайтесь на телеграмм: Telegram
Материалы по видео (руководство по установке и настройке для подключения к БД Postgres, и реализованный dag):
Видео из цикла - Как работают данные: практические кейсы. Если Вы когда-нибудь задумывались или хотите узнать как данные перемещаются внутри реальных продуктов, как строятся пайплайны, отслеживается их состояние и обеспечивается надёжная передача информации между системами - то этот цикл видео для Вас! Этот курс — гид в мир современных data-технологий. Я не буду просто теоретизировать, в результате мы вместе построим настоящую инфраструктуру обработки данных с нуля. 00:00 Приветственное слово 00:28 Airflow Connections 04:36 Установка и настройка взаимодействия с PostgreSql 14:34 Реализация dag'а для взаимодействия с БД 32:34 Заключительное слово #DataEngineering #ApacheAirflow #ETL #TechTutorial #DataInfrastructure #HandsOnTutorial #YoutubeEducation