DATALEARN | DE - 101 | МОДУЛЬ 7-2 ЧТО ТАКОЕ APACHE SPARK

Описание

Apache Spark является самый популярным инструментом среди инженеров данных, аналитиков и инженеров машинного обучения. Его главная задача это обработка данных. С помощью Spark можно подключаться к любому источнику данных, читать большие данные и обрабатывать их в оперативной памяти с использованием распределенного вычисления (distributed computing).

В этом видео:
? Узнаем история Apache Spark
? Посмотрим примеры архитектур с использованием Spark
? Разберемся когда его можно использовать
? Узнаем про основные компоненты
? Узнаем, обозначает термин Unified Analytics

В 7м модуле мы познакомимся с open source решением для аналитики и инжиниринга данных - Apache Spark и его коммерческой версией Databricks. Вы узнаете примеры использования в индустрии и популярные use cases. Я расскажу о своем опыте с Apache Spark в Амазоне и Майкрософт и научу вас работать с данными с помощью PySpark и Spark SQL, покажу вам лучшие книги и материалы по Spark.

В этом видео еще узнаете про Whistler, BC;)

? Подписывайтесь на канал "Datalearn" чтобы не пропустить остальные части и ставьте лайки!

? Записывайтесь и проходите курс Инженера Данных.
⚠️ КУРС БЕСПЛАТНЫЙ!
? Записаться вы можете на нашем портале https://datalearn.ru/

?? Запись на курс даст вам возможность не только просматривать видео, но и получить доступ к закрытым материалам, а также возможность выполнять домашние задания и получить сертификат прохождения курса.

?Самые актуальные новости про аналитику в Telegram канале: https://t.me/rockyourdata