Сегодня в рамках обучения дата-аналитиков и разработчиков распределенных приложений, рассмотрим, что такое пользовательские функции в Apache Hive, как их создать и использовать. А также в чем проблема вызова UDF-функции, зарегистрированной…
Метка: Impala
Как работает SQL в Apache NiFi: потоковая обработка Big Data с помощью структурированных запросов
Автор Анна ВичуговаКатегория NiFi, Use Cases, Статьи
Сегодня рассмотрим, как можно фильтровать потоки больших данных в Apache NiFi через типовой механизм SQL-запросов. Читайте далее, чем эта ETL-платформа стриминговой маршрутизации Big Data отличается от других систем, которые используют…
3 достоинства и 5 особенностей интеграции Apache Kudu и Spark с примерами
Автор Анна ВичуговаКатегория Cloudera, Spark, Статьи
Недавно мы разбирали особенности интеграции Apache Kudu и Spark. В продолжение этой темы, сегодня поговорим про некоторые особенности выполнения SQL-операций с данными при интеграции этих Big Data фреймворков, а также…
Как организовать конвейер self-service Machine Learning на Apache Kafka, Spark Streaming, Kudu и Impala: пример расширенной BI-аналитики Big Data
Автор Анна ВичуговаКатегория Cloudera, Kafka, Machine Learning, Spark, Use Cases, Статьи
Продолжая разбирать production-кейсы реального использования этих технологий Big Data, сегодня поговорим подробнее, каковы плюсы совместного применения Kudu, Spark Streaming, Kafka и Cloudera Impala на примере аналитической платформы для мониторинга событий…
Как сократить цикл BI-аналитики Big Data в тысячи раз или ETL-конвейер Apache Kafka-Storm-Kudu-Impala в Xiaomi
Автор Анна ВичуговаКатегория Cloudera, Hive, Kafka, Spark, Use Cases, Статьи
Сегодня мы рассмотрим практический кейс использования Apache Kudu с Kafka, Storm и Cloudera Impala в крупной китайской корпорации, которая производит смартфоны. На базе этих Big Data технологий компания Xiaomi построила…
BI-аналитика больших данных и другие Big Data системы: 5 примеров применения Apache Kudu
Автор Анна ВичуговаКатегория Cloudera, Use Cases, Новости, Статьи
Вчера мы говорили про интеграцию Apache Kudu со Spark SQL, Kafka и Cloudera Impala для эффективной организации озера данных (Data Lake), обеспечивающего быструю аналитику больших данных в режиме реального времени.…
Быстрая аналитика больших данных в Data Lake на Apache Kudu с Kafka и Spark
Автор Анна ВичуговаКатегория Cloudera, Hive, Kafka, Spark, Use Cases, Статьи
В продолжение темы про совместное использование Apache Kudu с другими технологиями Big Data, сегодня рассмотрим, как эта NoSQL-СУБД работает вместе с Kafka, Spark и Cloudera Impala для построения озера данных…
Синергия Apache Kudu с HDFS и Impala для быстрой аналитики Big Data в Hadoop
Автор Анна ВичуговаКатегория Hive, Use Cases, Статьи
В этой статье продолжим разговор про Apache Kudu и рассмотрим, как эта NoSQL-СУБД используется с Hadoop и Cloudera Impala, чем она полезна в организации озера данных (Data Lake) и почему…
Не только HDFS: как Apache Kudu ускоряет аналитику Big Data в Hadoop
Автор Анна ВичуговаКатегория Cloudera, Новости, Статьи
Сегодня поговорим про движки хранения больших данных в экосистеме Apache Hadoop и рассмотрим, что такое Kudu, каковы особенности применения, достоинства и недостатки этой колоночной NoSQL-СУБД. Также читайте в нашей статье,…
Современное КХД в облаках: гибриды, лямбда, MPP и прочая Big Data
Автор Анна ВичуговаКатегория Hive, Machine Learning, Spark, Статьи
В продолжение темы про корпоративные хранилища данных, сегодня мы рассмотрим облачные варианты Data Warehouse с учетом тренда на расширенную аналитику Big Data на базе машинного обучения. Читайте в нашей статье…
