Проанализировав предложения крупных PaaS/IaaS-провайдеров по развертыванию облачного кластера, сегодня мы сравним 4 наиболее популярных дистрибутива Hadoop от компаний Cloudera, HortonWorks, MapR и ArenaData, которые используются при развертывании локальной инфраструктуры для…
Метка: инфраструктура
Облачный слон для больших данных: обзор 6 популярных Hadoop-решений
Автор Анна ВичуговаКатегория Новости, Статьи
Мы уже рассказывали про общие достоинства и недостатки облачных Hadoop-кластеров для проектов Big Data и сравнивали локальные дистрибутивы. В продолжение этой темы, в сегодняшней статье мы подготовили для вас сравнительный…
Большие слоны в облаках: плюсы и минусы облачных Hadoop-решений
Автор Анна ВичуговаКатегория Новости, Статьи
Продолжая опровергать мифы о Hadoop, сегодня мы расскажем о том, как и где создать облачный кластер для Big Data и почему это выгодно. Концепция облачных вычислений стала популярна с 2006…
Как реплицировать, считать и удалить файлы в HDFS: подробности файловых операций
Автор Анна ВичуговаКатегория Новости, Статьи
Мы уже рассказывали, как большие данные (Big Data) сохраняются на диск. Сегодня поговорим о других файловых операциях в HDFS: репликации, чтении и удалении данных. За все файловые операции в Hadoop…
Как сохранить большие данные: операция записи файлов Big Data в HDFS
Автор Анна ВичуговаКатегория Новости, Статьи
HDFS предназначена для больших данных (Big Data), поэтому размер файлов, которые хранится в ней, существенно выше чем в локальных файловых системах – более 10 GB [1]. Продолжая тему файловых операций…
Как общаются друг с другом компоненты HDFS и почему это так важно для Big Data проектов
Автор Анна ВичуговаКатегория Новости, Статьи
Благодаря архитектурным особенностям распределенной файловой системы Hadoop, допустимые файловые операции в ней отличаются от возможных действий с файлами на локальных системах. В этой статье мы рассмотрим файловые операции в HDFS…
Сложно, дорого, универсально: 3 мифа о Hadoop и их опровержения
Автор Анна ВичуговаКатегория Cloudera, Hive, Kafka, Spark, Новости, Статьи
Сегодня мы поговорим о заблуждениях насчет базового инфраструктурного понятия хранения и обработки больших данных – экосистеме Hadoop и развеем 3 самых популярных мифа об этой технологии. А также рассмотрим применение…
