План на курса

Въведение

Преглед на Spark Streaming функции и архитектура

    Поддържани източници на данни Основни API

Подготовка на околната среда

    Зависимости Spark и стрийминг контекст Свързване с Kafka

Обработка на съобщения

    Разбор на входящи съобщения като JSON ETL процеси Стартиране на поточния контекст

Изпълнение на Windowed Stream Processing

    Интервал на плъзгане Конфигурация на доставка на контролна точка Стартиране на средата

Създаване на прототип на кода за обработка

    Свързване към тема на Kafka Извличане на JSON от източник на данни с помощта на Paw Variations и допълнителна обработка

Поточно предаване на кода

    Променливи за контрол на работата Дефиниране на стойности, които да съответстват на функциите и условията

Придобиване на поточен изход

    Броячи Kafka изход (съвпадащи и несъвпадащи)

Отстраняване на неизправности

Обобщение и заключение

Изисквания

  • Опит с Python и Apache Kafka
  • Познаване на платформи за обработка на потоци

Публика

  • Инженери по данни
  • Учени по данни
  • Програмисти
 7 Hours

Брой участници



Цена за участник

Oтзиви от потребители (5)

Свързани Kурсове

Kivy: Building Android Apps with Python

7 Hours

Свързани Kатегории