DATALEARN | DE - 101 | МОДУЛЬ 4-7 | Fancy ETL инструменты

Описание

Моя любимая категория иснтрументов "Fancy", то есть чем-то не обычные, но очень популярные. В нашем уроке я упомяну 4 самых популярных иснтрумента, к тому open source. Я с ними плотно не работал, поэтому я лишь слегка их коснюсь, чтобы вы знали об их существовании и по возможности попробовали. Ну а если вы уже про них знаете, то приходите к нам поделится опытом!

В этом видео вы узнаете про:
Apache Airflow
DBT tool
Luigi
Apache NiFi
Clickhouse

В 4-ом модуле нашего курса вы узнаете про интеграцию и трансформацию данных - ETL и ELT. Это ключевой элемент в аналитическом решении, с помощью которого мы наполняем данными хранилище данных и автоматизируем загрузку и трансформацию данных. Мы рассмотрим примеры популярных on-premise batch решений. Узнаете в чем отличие ETL от ELT, для чего нужны такие решения, что значит batch и on-premise, как с помощью ETL/ELT можно создавать модели данных, на примере dimensional modelling, рассмотрим рынок ETL/ELT. Потренируемся на классическом open-source ETL решении Pentaho DI и рассмотрим настольный инструмент от Tableau - Tableau Prep.

⚠️Для эффективного прохождения курса необходимо зарегистрироваться в Slack (наш чат) и читать учебник на Github, в котором рассказывается про последовательность урок, лабораторные работы и домашнее задание.⚠️

В этом модуле, мы не будем затрагивать облачные ETL/ELT инструменты и решения Big Data, для этого у нас будут отдельные модули.

Подписывайтесь на канал "Datalearn" чтобы не пропустить остальные части и ставьте лайки!

Записывайтесь и проходите курс Инженера Данных.
⚠️ КУРС БЕСПЛАТНЫЙ!
Записаться вы можете на нашем портале [https://datalearn.ru/](https://datalearn.ru/)

Запись на курс даст вам возможность не только просматривать видео, но и получить доступ к закрытым материалам, а также возможность выполнять домашние задания, отдавать их на проверку и получить сертификат прохождения курса.

Поддержать проект (а вдруг?): [https://www.patreon.com/dmitryanoshin](https://www.patreon.com/dmitryanoshin) или [https://paypal.me/dmitryanoshin](https://paypal.me/dmitryanoshin)

Книги по аналитике Дмитрия Аношина - [https://www.amazon.com/Dmitry-Anoshin/e/B01A5PVT2M](https://www.amazon.com/Dmitry-Anoshin/e/B01A5PVT2M)