Владимир Гавриленко, Севак Аветисян, Владимир Баев, Юлия Волкова: "Apache Airflow Workshop"
Описание
Apache Airflow Workshop
В ходе воркшопа мы быстро обсудим архитектуру Apache Airflow, построим пайплайн, в котором потрогаем сенсоры, несколько различных операторов, запишем в базу результаты из нашего пайплайна и настроим нотификации в Telegram на случай успешного (или не очень) окончания пайплайна, поговорим про распределение задач по воркерам и зачем нужны пулы.
Пререквизиты: знание Python на среднем уровне (умение писать скрипты, простейшие программы, знание синтаксиса), установленные Python 3.6, Docker и Docker Compose, OS: предпочтительно Linux/MacOS; можно Windows, но возникшие проблемы, связанные с ОС, придется решать самостоятельно)
Владимир Гавриленко  Россия. Санкт-Петербург BigData Developer GridDynamics |
Севак Аветисян Россия. Санкт-Петербург Senior BigData Developer GridDynamics |
Владимир Баев Россия. Санкт-Петербург Senior BigData Developer GridDynamics |
Юлия Волкова Россия. Санкт-Петербург Python Specialization Lead GridDynamics |
Контакты организаторов