ETL на airflow c postgresql - Курсы

В данном видео показан пример ETL процесса на платформе Airflow. Для этого реализован DAG, ссылку на код можно видеть ниже. Данные подгружаются с одного источника метеоданных через API, выполняется преобразование данных в нужный формат и далее данные записываются в базу данных PostgreSql с помощью postgresOperator

Ссылка на код: https://gist.github.com/Machin....eLearningIsEasy/fb81

Более подробно вы можете познакомиться с нашими курсами по Apache AirFlow здесь
КУРС DATA PIPELINE НА APACHE AIRFLOW И APACHE HADOOP
https://www.bigdataschool.ru/c....ourses/data-flow-wit
КУРС DATA PIPELINE НА APACHE AIRFLOW И ARENADATA HADOOP
https://www.bigdataschool.ru/c....ourses/course-airflo

Еще видео по Apache Airflow:
Часть 1: Начало работы с apache airflow - https://youtu.be/G6ipydgZRnE
Часть 2: ETL на airflow - https://youtu.be/XFQ0KPaDIT8
Часть 4: Основные абстракции Apache Airflow - https://youtu.be/OvwNEpgqYHo

По вопросам обучения на курсах машинного обучения приглашаем в нашу "Школу Больших Данных"

Курс проводится только в специализированном учебном центре «Школа Больших Данных»

Обращаться по телефону:
+7 (495) 41-41-121
+7 (995) 100-45-63

Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:

Телеграм-канал: https://t.me/BigDataSchool_ru
Facebook: https://www.facebook.com/BigDataSchoolRu/
Вконтакте: https://vk.com/bdschool_mck
LinkedIn: https://www.linkedin.com/company/bigdataschoolru/
Twitter: https://twitter.com/BigdataschoolR

Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных - https://www.bigdataschool.ru