Особенности построения озера данных (Data Lake)

5 уровней зрелости вашего предприятия и особенности  построения озера данных на каждом из них Примерно с 2013 года тема технологий Big Data преподносится в СМИ [1-3] как панацея решения почти всех бизнес-проблем, обещая многократное сокращение расходов, повышение прибыли и оптимизацию процессов за счет быстрой обработки больших объемов неструктурированной информации, поступающей из разных источников [4]. Однако, внедрение любых информационных технологий на предприятии без устоявшейся системы управления равнозначно автоматизации хаоса [5]. Прежде всего следует определить уровень корпоративной зрелости, применив для этого методологию оценки бизнес-процессов Capability Maturity Model Integration (CMMI) [6]. В таблице 1 показаны 5 уровней зрелости бизнес-процессов по CMMI-модели. Таблица 1. 5 уровней зрелости бизнес-процессов по CMMI-модели Уровень зрелости управления Состояние бизнес-процессов 5. Оптимизируемый Находятся в состоянии непрерывного мониторинга и улучшения 4. Далее …

Новый курс по безопасности озера данных Hadoop

Знакомство с расширенными возможностями обеспечения безопасности озера данных под управлением Apache Ambari и Apache Ranger дистрибутива HortonWorks или Arenadata Hadoop.  На протяжении 3 дней практического обучения вы рассмотрите вопросы  установки и настройки эшелонированной защиты- безопасности  озера данных (Data Lake security) Hadoop под управлением дистрибутива Hadoop компании HortonWorks с использованием протоколов безопасности Kerberos, интеграция с  Active Directory или FreeIPA с поддержкой механизмов авторизации и аудита событий безопасности Apache Ranger, настройка защищенного периметра сети с поддержкой Single-Sign-On средствами Apache Knox Gateway.  Политики ограничения доступа Apache Ranger на уровне строк, колонок и  значений  с использованием Apache Atlas.  Использование технологии машинного обучения для распознавания инцидентов безопасности с использованием Apache Metron. Настройка опций безопасности для компонентов экосистемы Hadoop: Kafka, HDFS, YARN, Apache Spark, Hive, HBase, MapReduce.  Подробная программа курса на сайте «Безопасность озера данных Hadoop (HortonWorks HDP)» Комплексное предложение  по скидке на любые два курса Далее …