Съдържание и теми, включени в курса
Въведение в Apache Spark
- Ролята на Spark в обработката на големи данни
- Архитектура на Spark и неговите компоненти
Настройка на Apache Spark
- Хардуерни и софтуерни изисквания
- Процедури за инсталиране в самостоятелен и клъстерен режим
- Най-добри практики за конфигуриране за системни администратори
Администриране на Spark клъстери
- Инструменти и техники за управление на клъстери
- Наблюдение на Spark приложения и клъстерни ресурси
- Конфигурации за сигурност и управление на потребители
Настройка и оптимизация на производителността
- Разпределение на ресурси и планиране
- Настройка на Spark за оптимална производителност
- Идентифициране и разрешаване на често срещани затруднения
Отстраняване на неизправности и решаване на проблеми
- Често срещани предизвикателства при администрирането на Spark
- Диагностични инструменти и техники за отстраняване на неизправности
- Подход стъпка по стъпка за разрешаване на често срещани проблеми
- Най-добри практики за поддържане на здравословна Spark среда
Теми за напреднали в администрирането
- Интеграция с други инструменти за големи данни
- Осигуряване на висока достъпност и възстановяване при бедствия
- Надграждане и мащабиране на Spark клъстери
Обобщение и следващи стъпки
Изисквания
- Основни познания по мрежова конфигурация и управление
- Запознатост с операционната система Linux и командния интерфейс
- Интерес към изучаването на разпределени изчислителни системи и управление на големи данни
Аудитория
- Системни администратори
Отзиви от участници (3)
Пътешествие в света на Spark: много интензивен курс. DSL, Spark SQL, разделяне срещу пакетизиране за мен.
Georgiana Elisabeta
Курс - Apache Spark Fundamentals
Машинен превод
Ми ми допадна, че беше praktično. Обичах да прилагам теоретичните знания с практически примери.
Aurelia-Adriana - Allianz Services Romania
Курс - Python and Spark for Big Data (PySpark)
Машинен превод
Фактът, че можехме да вземем със себе си повечето от информацията/курса/презентацията/упражненията, които сме извършили, така че да можем да ги разгледаме отново и възможно е да повторим това, което не сме разбрали първоначално, или подобрим това, което вече сме направили.
Raul Mihail Rat - Accenture Industrial SS
Курс - Python, Spark, and Hadoop for Big Data
Машинен превод