• Гигабайты ценной информации. Присоединяйся.
    У нас действительно всё бесплатно, включая ChatGPT/DALLE/VISION)

[ВigData Тeam] Практический курс по Big Data. Часть 2. Spark from zero to hero (2023)

serafim

Житель Разулы
Команда форума
Разула в сердце
Регистрация
25 Апр 2016
Сообщения
78.835
Реакции
123.479
Ra
242.561
[BigData Тeam] Практический курс по Big Data. Часть 2. Spark: from zero to hero (2023)

Практический курс по Big Data. Часть 2. Spark: from zero to hero [bigdata team]

На протяжении этой части курса вы будете работать со Spark: от основных терминов и RDD до Spark DataFrames и оптимизации Spark вычислений.

В этом модуле вы изучите:
  • cхема выполнения задачи в Spark; основные термины Spark (job, task, stage); представление вычислений в виде графа. Spark Python API. Spark RDD API; Broadcast-сообщения и счетчики. взаимодействие Hive и Spark SQL; отличия DF от RDD. Spark on YARN; типы stage в Spark; оптимизация операции shuffle; настройка Garbage Collection, тюнинг потребления памяти.
Продажник:
Практический курс по Big Data | BigData Team
Скачать:
 

Теги по которым нашли тему

  1. python
  2. sql
Сверху