ETL на airflow c postgresql - Курсы
В данном видео показан пример ETL процесса на платформе Airflow. Для этого реализован DAG, ссылку на код можно видеть ниже. Данные подгружаются с одного источника метеоданных через API, выполняется преобразование данных в нужный формат и далее данные записываются в базу данных PostgreSql с помощью postgresOperator
Ссылка на код: https://gist.github.com/Machin....eLearningIsEasy/fb81
Более подробно вы можете познакомиться с нашими курсами по Apache AirFlow здесь
КУРС DATA PIPELINE НА APACHE AIRFLOW И APACHE HADOOP
https://www.bigdataschool.ru/c....ourses/data-flow-wit
КУРС DATA PIPELINE НА APACHE AIRFLOW И ARENADATA HADOOP
https://www.bigdataschool.ru/c....ourses/course-airflo
Еще видео по Apache Airflow:
Часть 1: Начало работы с apache airflow - https://youtu.be/G6ipydgZRnE
Часть 2: ETL на airflow - https://youtu.be/XFQ0KPaDIT8
Часть 4: Основные абстракции Apache Airflow - https://youtu.be/OvwNEpgqYHo
По вопросам обучения на курсах машинного обучения приглашаем в нашу "Школу Больших Данных"
Курс проводится только в специализированном учебном центре «Школа Больших Данных»
Обращаться по телефону:
+7 (495) 41-41-121
+7 (995) 100-45-63
Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:
Телеграм-канал: https://t.me/BigDataSchool_ru
Facebook: https://www.facebook.com/BigDataSchoolRu/
Вконтакте: https://vk.com/bdschool_mck
LinkedIn: https://www.linkedin.com/company/bigdataschoolru/
Twitter: https://twitter.com/BigdataschoolR
Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных - https://www.bigdataschool.ru