План на курса
Въведение в платформата Stratio
- Обобщение на архитектурата и основните модули на Stratio
- Ролята на Rocket и Intelligence в жизнения цикъл на данни
- Вход в системата и навигация по потребителския интерфейс на Stratio
Работа с модула Rocket
- Ингестинг и създаване на пайплайн
- Свързване с източници на данни и конфигуриране на трансформации
- Използване на PySpark за предварителна обработка в Rocket
Основи на PySpark за потребителите на Stratio
- Структури и операции с данни в PySpark
- Циклични конструкции: for, while, if/else използване
- Писане на потребителски дефинирани функции (UDFs) с def и прилагане им
Напредно използване на Rocket с PySpark
- Стримерски ингестинг и трансформации
- Използване на цикли и функции в батч и реално време сценарии
- Ръководства за производителност при пайплайните PySpark
Изучаване на модула Intelligence
- Обобщение на функциите за моделиране и анализ на данни
- Избор, трансформация и разглеждане на характеристики (features)
- Ролята на PySpark в персонализирания анализ и извлечението на инсайтове
Създаване на напредни рабочи процеси за аналитика
- Създаване на потребителски дефинирани функции (UDFs) в модула Intelligence
- Применяване на условни и циклични конструкции за логика с данни
- Употреба: сегментация, агрегация и прогнозиране
Разпространяване и сътрудничество
- Запазване, експортиране и повторно използване на рабочи процеси
- Сътрудничество с други членове от екипа в Stratio
- Ревю на изхода и интегриране с по-напреднони инструменти
Заключение и следващи стъпки
Изисквания
- Опит с програмирането на Python
- Разбиране на концепциите за анализа на данни или обработката на големи данни.
- Основно знание за Apache Spark и разпределеното изчисление
Целева група
- Специалисти по данни, работещи на платформите Stratio
- Аналитици или разработчици, използващи модулите Rocket и Intelligence
- Технически екипи, преминаващи към работни процеси с PySpark в рамките на Stratio
Отзиви от потребители (3)
Извършване на упражнения
Joe Pang - Lands Department, Hong Kong
Курс - QGIS for Geographic Information System
Машинен превод
Работните примери ни позволиха да усетим какво е работа с програмата. Добри обяснения и интеграция на теоретични концепции и както те се свързват с практически приложения.
Ian - Archeoworks Inc.
Курс - ArcGIS Fundamentals
Машинен превод
Изглежда ми прекрасно да проведа отново обучение с Ани, той беше наистина отличен. Аз съм просто специалист по ГИС, но Ани ми обясни всичко много ясно, разложи сложните процеси с прости думи. Продължавайте така, благодаря.
Lwazi Qhingana - South African National Roads Agency (SANRAL) SOC Ltd
Курс - Python for Geographic Information System (GIS)
Машинен превод