NIFI: Кластер Apache NiFi

Apache NiFi- кластер потоковой обработки данных в Data Lake

2-дневный практический курс по Apache NiFi разработан для специалистов, отвечающих за администрирование, настройку и сопровождение потоковой обработки данных в Data Lake на базе кластера Apache NiFi.

 

Ближайшая дата курса 18 — 19 мая  2020
  23-24 сентября 2020
   
Стоимость обучения    36.000 рублей

курсы обучения Hadoop и машинного обучения

Аудитория: Специалисты по администрированию и сопровождению потоков данных с использованием Apache NiFi, архитекторы и разработчики.

Предварительный уровень подготовки:

  • Начальный опыт работы в Unix
  • Начальный опыт работы с Hadoop

Продолжительность: 2 дня, 16 академических часов.

Соотношение теории к практике 50/50

Программа курса

  1. Введение в Apache NiFi

    • Архитектура Hadoop Data Flow
    • Архитектура решения и ключевые концепции Apache NiFi :
      • Приниципы потоковой обработки данных
      • FlowFile
      • processor
      • connector
      • FlowFile Repository
      • Content Repository
      • Provenance Repository
    • Data Lineage и Data Provenance( Data Provenance Events)
    • Функционал NiFi по управлению потоковой обработкой данных:
      • гарантированная доставка
      • управление каналом (буферизация, pressure)
      • QoS
      • версионность
  2. Администрирование NiFi

    • Установка и настройка кластера Apache NiFi
    • Управление кластером NiFi
    • Создание NiFi DataFlow
    • Добавление процессора, возможности масштабирования, работа с атрибутами и свойствами
    • Процессорные группы (Remote Processor Group)
    • Использование NiFi шаблонов
    • Оптимизация DataFlow
    • Инструменты мониторинга и уведомлений NiFi
    • Apache NiFi Registry версионность и поддержка production deployment
  3. Интеграция и масштабирование

    • Вертикальное и горизонтальное масштабирование и отказоустойчивость NiFi
    • Доступные расширения и готовые «из коробки» процессоры и коннекторы
    • Возможности интеграции кластера NiFi (consumer/provider) с Kafka
    • Apache Nifi vs. MiniFi
    • Интеграция Apache Kafka, NiFi, MiNiFi
    • Типовые сценарии/схемы потоковой обработки данных

курсы обучения Hadoop и машинного обучения

 

Скачать программу курса «Администрирование кластера Apache NiFi» в формате pdf

AIRF: Apache AirFlow

KAFKA: Apache Kafka кластер администратор