ADB: Эксплуатация Arenadata DB

ArenaData DB, Эксплуатация Аренадата

Курсы администрирования СУБД> Курсы эксплуатации Arenadata DB в учебном центре «Школы Больших Данных»

 

Ближайшая дата курса по эксплуатации Arenadata DB 20-23 октября
  24-27 ноября
  8-11 декабря
Стоимость обучения   144.000 рублей
Стоимость сертификационного экзамена 9.000 рублей

Регистрация 4 дня авторизованного практического обучения администрированию и эксплуатации отечественной корпоративной платформы обработки и хранения больших данных на базе масштабируемой отказоустойчивой СУБД с открытым исходным кодом Greenplum Database.

Что такое Arenadata DB

Arenadata DB (ADB) – это российский Big Data продукт, распределенная масштабируемая отказоустойчивая СУБД на базе аналитической массивно-параллельной системы с открытым исходным кодом Greenplum, адаптированная для корпоративного использования и зарегистрированная в государственном реестре РФ программ для ЭВМ.

Arenadata DB обеспечивает надежное безопасное хранение и аналитическую обработку больших объемов (до сотен терабайт) структурированных и слабоструктурированных данных для решения различных бизнес-задач, от предиктивной аналитики, регулярной отчетности и анализа оттока клиентов до построения корпоративных хранилищ данных.

На практике Arenadata DB используется в ритейле, телекоммуникационных компаниях, государственных предприятиях и других секторах экономики для организации витрин данных и быстрой аналитики Big Data с генерацией сложных отчетов в режиме near real-time.

ArenaData DB

Arenadata DB зарегистрирована в Едином реестре российских программ, соответствует политике импортозамещения и может использоваться в проектах цифровизации государственных организаций и частных компаний России.

Узнать подробности

 

Кому нужны курсы по Arenadata DB

Авторизованные курсы Arenadata в Школе Больших Данных по Arenadata DB ориентированы на следующие категории ИТ-специалистов:

  • инженер данных (Data Engineer);
  • администратор больших данных (Big Data Administrator);
  • администратор баз данных (Database Administrator);
  • аналитик больших данных (Data Analyst).

Практические курсы по Arenadata DB предназначены для системных администраторов, системных архитекторов и разработчиков, которые хотят получить практические навыки по установке, конфигурированию, обслуживанию и управлению кластером Arenadata DB.

Необходимая предварительная подготовка

  • Знание базовых команд Linux (опыт работы с командной строкой, файловой системой , POSIX, текстовыми редакторами vi, nano)
  • Опыт работы с SQL

Программа курса

 

О курсе по эксплуатации Arenadata DB

Обучающий курс «Эксплуатация Arenadata DB» предназначен для системных администраторов, архитекторов, разработчиков, аналитиков, использующих ADB. Курс даёт необходимые знания для эффективной и безопасной эксплуатации ADB в продуктовых средах, загрузке, обработке и выгрузке данных, настройках безопасности и дополнительных расширениях. Освоение каждой практической темы подкрепляется лабораторной работой.

Курс проводится очно. Длительность курса составляет 4 дня. По окончанию курса проводится экзамен, по результатам сдачи которого выдаётся сертификат вендора.

Соотношение теории к практике 40/60

По завершении курса и сертификационного тестирования вы получите следующие документы:

 

Регистрация

 

Программа курса ADB: Эксплуатация Arenadata DB

  1. Введение в СУБД Arenadata DB
  • Обзор архитектуры ADB
  • Концепция MPP и её имплементация в ADB
  • Терминология и архитектура СУБД
  • Интерконнект
  • Выполнение запросов
  • Отказоустойчивость
  1. Настройка и управление СУБД
  • Окружение. Основные директории. Логи. Конфигурационные файлы. Файлы данных
  • Переменные окружения. Процессы СУБД.
  • Управление БД: запуск, остановка, проверка статуса
  • Подключение к БД. Реквизиты. Доступы. PSQL
  • Управление параметрами СУБД
  • Устройство БД.
  • Шаблоны БД. Логическая схема данных. Обзор дефолтных схем
  • Основные объекты для работы с БД
  • Создание таблицы в БД. Основные правила создания таблиц
  • Типы данных. Распределение таблицы. Skew
  • Констрейнты. Тип хранения данных. Компрессия
  1. Отказоустойчивость
  • Принципы безотказного функционирования БД
  • Спилл-файлы
  • Восстановление сегмента. Восстановление мастера
  1. Работа с SQL-запросами
  • Выполнение запросов
  • Получение плана. Оптимизаторы. Статистика выполнения. Разбор плана запроса
  • Redistribute и Broadcast.
  • Поиск узких мест
  1. Партиционирование таблиц
  • Создание партиционированных таблиц
  • Ключ партиционирования
  • Разные типы хранения
  • Файлспейсы и тейблспейсы
  • Мульти-партиционирование
  • Удаление, разбиение, обмен партиций
  • Внешние таблицы (обычные и web-внешние)
  • Загрузка в партиционированные таблицы
  1. Индексы
  • Определение и назначение
  • Применимость индексов
  • Типы индексов
  • Best practices
  • Управление индексами
  • Основные параметры управления индексами в запросе
  1. Управление параллельным доступом с помощью многоверсионности (MVCC – MultiVersion Concurrency Control) 
  • Цели и реализации
  • VACUUM. VACUUM FULL.
  • Примеры и регламенты
  1. Транзакции
  • Обзор
  • Уровни изоляции
  • CAP-теорема
  1. Статистика
  • Цели.
  • Сбор статистики
  1. Работа с командами и ресурсными группами
  • COPY: синтаксис и примеры
  • Обзор ресурсных групп
  • Ограничиваемые ресурсы
  • Сценарии использования. GUCs
  1. Утилиты и службы
  • GPFDIST (служба распространения файлов для внешних таблиц): сценарии, сервер gpfdist, примеры
  • Создание внешних таблиц
  • Опции LOCATION
  • Достижение лучшей производительности.
  • Параметры GUC
  • GPLOAD (утилита запуска задачи по загрузке данных, указанной в управляемом YAML-файле): определение, назначение, использование
  1. PXF – сервис взаимодействия ADB с внешними источниками данных
  • Архитектура
  • Директории
  • Конфигурационные файлы и логи
  • Управление сервисом
  • HDFS, HBASE, Hive, JDBC
  • Batching. Pooling. User impersonation
  1. Пользовательские функции (UDF, User-Defined Functions)
  • Цели
  • Реализация на PL/SQL, PL/python, C.
  • PLContainer
  • Волатильность и доверенность функций
  1. Обзор расширений
  • Apache Madlib
  • PostGIS – 10
  • Примеры использования
  1. Пользователи и группы
  • Роли и группы пользователей.
  • Доступы.
  • Создание пользователей, управление.
  • Интеграция с LDAP.
  1. Резервное копирование (бэкап)
  • Принципы бэкапов
  • Команды gp_dump/gp_restore. gpbackup/gprestore
  • Директории и файлы
  • Сжатие бэкапов
  • Перенос бэкапов между разными кластерами
  • Внешние таблицы
  1. Мониторинг СУБД
  • Архитектура
  • Средства мониторинг Diamond, Carbon, Graphite, Grafana.
  • Директории
  • Собираемые метрики
  • Best practices по анализу данных мониторинга
  • Алерты
  1. Администрирование СУБД
  • Встроенный монитор активности gpperfmon: архитектура, каталог, полезные таблицы
  • Консоль администратора Zeppelin: архитектура, директории, конфигурационные файлы, управление. Обзор ноутбуков. Подсчёт skew на основе ФС.
  1. Обновление СУБД
  • Процесс минорного обновления
  • Обзор утилит, входящих в поставку СУБД

  

Примерный список практических занятий курса по экcплуатации Arenadata DB:

  • Запуск, остановка, проверка статуса СУБД
  • Подключение к БД. Настройка реквизитов и доступов
  • Управление параметрами СУБД
  • Работа с шаблонами и дефолтными схемами БД
  • Восстановление сегмента и мастера
  • Создание, распределение и компрессия таблиц
  • Выполнение запросов и поиск узких мест
  • Партиционирование таблиц
  • Работа с индексами
  • Управление параллельным доступом с помощью многоверсионности (MVCC)
  • Проведение транзакций
  • Сбор статистики
  • Работа с командой COPY
  • Работа с ресурсными группами
  • Работа с утилитами GPFDIST и GPLOAD
  • Настройка взаимодействия ADB с внешними источниками данных с помощью сервиса PXF
  • Создание пользовательских функций (UDF, User-Defined Functions)
  • Работа с расширениями Apache Madlib и PostGIS
  • Создание и управление пользователями (группы, роли, интеграция с LDAP)
  • Создание, сжатие и перенос бэкапов между кластерами
  • Работа со средствами мониторинга СУБД
  • Работа с монитором активности gpperfmon и консолью администратора Zeppelin
  • Обновление СУБД

Для регистрации на курсы «ADB: Эксплуатация Arenadata DB»  заполните форму по ссылке внизу или позвоните по телефону +7 (995) 100-45-63

РегистрацияСкачать программу курса «ADB: Эксплуатация Arenadata DB » в формате pdf