Кто такой Data Scientist в Big Data: профессиональные компетенции исследователя данных

Big Data, Большие данные, профессия, карьера, цифровизация, цифровая трансформация, предиктивная аналитика, машинное обучение, Machine Learning

В этом выпуске мы продолжаем введение в Data Science для чайников, разбирая профессии Big Data, и рассказываем, кто такой Data Scientist: что необходимо знать ученому по данным и чем исследователь отличается от аналитика. Что делает ученый по данным Как и Data Analyst, исследователь данных тоже работает с информационными массивами путем выполнения следующих операций: поиск закономерностей в информационных наборах; подготовка данных к моделированию (выборка, очистка, генерация признаков, интеграция, форматирование); моделирование и визуализация данных; разработка и тестирование гипотез по улучшению бизнес-метрик через построение моделей машинного обучения (Machine Learning). Data Scientist, в большинстве случаев, ориентирован на предиктивную аналитику, тогда как аналитик данных чаще всего рассматривает информацию пост-фактум. Тем не менее, основная цель исследователя данных созвучна главной рабочей цели аналитика Big Data – извлечение Далее …

Кто такой Data Analyst в Big Data: что нужно знать аналитику данных

Big Data, Большие данные, профессия, карьера, цифровизация, цифровая трансформация, предиктивная аналитика, машинное обучение, Machine Learning

Продолжая разговор про то, с чего начать вход в большие данные, и какие бывают ИТ-специальности, сегодня мы расскажем, чем именно занимается аналитик Big Data, что он должен знать и уметь, а также где и как получить необходимые профессиональные компетенции. Что делает аналитик данных Как правило, Data Analyst работает с информационными массивами, самостоятельно выполняя при этом целый набор операций: сбор данных; подготовка данных к анализу (выборка, очистка, сортировка); поиск закономерностей в информационных наборах; визуализация данных для быстрого понимания имеющихся результатов и будущих тенденций; формулирование гипотез по улучшению конкретных бизнес-метрик за счет изменения других показателей. Все эти задачи необходимы для достижения главной цели аналитика данных – извлечение из массивов информации сведений, ценных бизнесу для принятия оптимальных управленческих решений. В некоторых компаниях в Далее …

Цифровая корпорация 21-го века: что такое Data-Driven Company

Data-Driven Company, Agile, DevOps, бизнес-процессы, управление, менеджмент, администрирование, предиктивная аналитика, цифровизация, цифровая трансформация, Big Data, Большие данные

В результате цифровой трансформации «традиционного предприятия» должна получиться идеальная организация, работающая на основе данных, в т.ч. больших (Big Data). Сегодня мы поговорим, что такое Data—Driven Company, чем она отличается и как ей стать: читайте в нашей статье, какие инструменты Big Data, методы Agile и инженерные подходы системного анализа применяются для «тотальной цифровизации», повышения эффективности труда и использования данных. Что такое Data—Driven Company (DDC) Data—Driven Company – это предприятие, гибкое управляемое данными – дата-ориентированная Agile-компания, бизнес-процессы и организационная структура которой построены на основе сквозной интеграции информационных потоков и их непрерывной, в т.ч. прогнозной предиктивной, аналитике. При этом цепочка создания ценности (основного продукта) выглядит следующим образом [1]: большие данные о рабочих процессах и продуктах, текущем и прогнозном состояниях внешней среды, настоящих и Далее …

Не бойся падать – большие данные подстелят соломку: умное страхование

Большие данные, Big Data, Machine Learning, Internet of Things, IoT, машинное обучение, интернет вещей, предиктивная аналитика, страхование, цифровизация, цифровая трансформация, маркетинг

Big Data – это основа бизнеса страховых компаний, работа которых полностью основана на информации: статистике, сведениях о клиентах, страховых случаях и вероятностях их наступления, а также финансовой оценке всех этих данных. Читайте в нашей сегодняшней статье, как «большая тройка» современных информационных технологий (большие данные, машинное обучение и интернет вещей) увеличивают прибыль страховщиков, прогнозируя потребности текущих и находя новых клиентов, а также уменьшают их затраты, сокращая выплаты по мошенническим операциям. Зачем страховщикам Big Data, Machine Learning и Internet of Things Цифровизация захватила и сектор страхования: страховые компании стремятся стать data-driven организациями. Широкая продуктовая линейка и обилие информации обусловливают использование страховщиками технологий Big Data, Machine Learning и Internet of Things в следующих направлениях: персонализация страховых полисов; оценка рисков при формировании страховых тарифов; Далее …

Цифровизация и автоматизация – не одно и то же: разбираем 5 основных отличий

Цифровизация, цифровая трансформация, Digital Transformation, цифровая экономика, автоматизация, предиктивная аналитика, бизнес-процессы

Цифровизация и автоматизация – не одно и то же: разбираем 5 основных отличий Чем цифровизация отличается от автоматизации и чем они похожи: разбираем 5 главных характеристик. 90-е годы прошлого века принято считать началом современной эпохи промышленной автоматизации, когда компании стали разрабатывать и активно внедрять программно-аппаратные решения для замены ручного туда роботизированным производством и специализированным софтом [1]. Однако, сегодня практически во всех отраслях, от нефтегазового сектора до государственного управления [2], на повестке дня стоят термины «цифровизация» и «цифровая экономика». Эти понятия стали весьма популярны с конца 2016 года, после Президентского послания Федеральному собранию РФ [3]. На примере основных направлений корпоративной цифровизации, о которых мы рассказывали здесь, разбираемся, чем кардинально цифровизация отличается от автоматизации и что между ними общего.  1. Степень интеграции процессов Далее …

Как снизить отток клиентов с помощью алгоритмов машинного обучения

Churn rate, показатель оттока, маркетинг

Как использование технологий Machine Learning в онлайн-маркетинге помогло снизить отток клиентов и повысить ROI лояльности покупателей Снижаем Churn Rate и повышаем ROI лояльности клиентов: российский гигант интернет-торговли Ozon.ru делится своим опытом успешного применения технологий Machine Learning в онлайн-маркетинге Churn Rate или показатель оттока, считается одной из важнейших маркетинговых метрик, которая показывает жизнеспособность бизнес-модели удержания лояльных клиентов [1]. Компании стремятся держать его на минимальном уровне, повышая отдачу от стимуляции повторных обращений, т.е. ROI – return of investment, поскольку привлечение нового покупателя стоит в 5 раз дороже возврата старого. А вероятность продажи товаров и услуг старому клиенту равна 60-70%, тогда как новому – всего 5-20% [2]. Что такое превентивный онлайн-маркетинг Чтобы сделать потенциальную продажу реальной, необходимо четко знать потребности клиента. Например, если пользователь задает поисковой запрос «оливковое Далее …

Как BigData и Machine Learning в нефтегазовой отрасли помогают экономить миллиарды

Цифровая скважина

Как Big Data и Machine Learning в  нефтегазовой отрасли экономит миллиарды Согласно заявлению Валерия Селезнева, первого зампреда Комитета по энергетике Госдумы РФ, сделанному в сентябре 2018 г. на VIII ежегодной конференции «Нефтегазопереработка-2018», нефтегазовая отрасль в России является главным источником валютных и налоговых поступлений страны. На ее долю приходится порядка 12% всего промышленного производства и более 40% поступлений в бюджет. Однако, несмотря на почти вековую отечественную историю этой индустрии, ее современное состояние сопровождается множество проблем, решить которые должны новейшие информационные технологии [1]. В частности, задачи оценки надежности и прогнозирования осложнений при эксплуатации оборудования с использованием машинного обучения Machine Learning в нефтегазовой отрасли, подбора методов увеличения нефтеотдачи, оптимизации транспортных маршрутов и схем поставок оборудования и продукции, а также прогнозирования эффективности разработки новых Далее …