Предиктивная аналитика и Big Data:

методы, инструменты, решенияМарина Онищенко, Исполнительный директор StatSoft RussiaМилков Максим, Технический директор StatSoft Russia

1

О Dell Statistica

26/10/20152

Многолетний опыт в аналитике с 1984

Более 16,000 аналитических процедур и методов

Более 1 млнпользователей Dell Statistica

Мониторинг процессов и контроль качества в масштабах предприятия

Расширяемая и настраиваемая под задачи пользователей

Обширная сфера применения

Области применения

26/10/20153

• Анализ выживаемости

• Оценка эффективности лекарственных препаратов

• Планирование медицинских исследований

• Анализ результатов клинических исследований

• Оценка рисков заболеваний

и многое другое…

• Прогнозирование нагрузок сети

• Классификация пользователей

• Оценка мощности необходимого оборудования

• Распределение трафика

• Анализ контента интернет-ресурсов

• Планирование промо-акций

и многое другое…

• Контроль качества

• Мониторинг процессов

• Анализ надежности

• Планирование промышленных экспериментов

• Анализ причин потери качества

• Обеспечение стабильности процессов

и многое другое…

• Оценка рисков

• Кредитный скоринг

• Прогнозирование оттока клиентов

• Выявление мошенничества

• Прогноз остатков на счетах

• Мониторинг финансовых показателей

и многое другое…

• Сегментация рынка

• Прогнозирование спроса, продаж

• Выбор оптимального поставщика

• Сравнительный анализ и прогноз цен на товары

• Оценка эффективности рекламы

и многое другое…

Бизнес/

Маркетинг

Медицина/

ФармакологияПроизводство

Телеком/

Интернет

Банковское

дело/Финансы

Аналитические инструменты серии Statistica

26/10/20154

Универсальны

Просты в использовании

Расширяемые, гибкие, настраиваемые

Легко интегрируемые

3M

Инструменты Statistica Enterprise создают наглядную систему управления производственным процессом, облегчают непрерывный процесс улучшения качества, уменьшают время, затрачиваемое на доступ к данным.

ВСМПО

• Statistica является мощной аналитической системой для профессионального анализа, что позволяет решать широкий круг задач любой сложностиe.

• Statistica обеспечивает надежную реализацию статистических методов анализа. Большой выбор графических инструментов.

• Программа полностью переведена на русский язык, включая интерфейс, документацию и справочное руководство.

Центральный банк РФ

Statistica является действительно гибким, мощным, легким в использовании инструментом, позволяющим решать широкий спектр исследовательских задач.

Pepsi

Сбор данных и автоматизация предоставляют широкие возможности для правильного анализа результатов и улучшения производственного процесса.

Казцинк

Основное свойство продуктов линейки Statistica: мощность, простота в использовании, наглядность и эффективность и при этом невысокая стоимость.

Уникальные возможности визуализации

26/10/20155

Специальные программы для вузов

Statistica Ultimate Academic Bundle:

• Statistica Advanced

• Statistica Automated Neural Networks

• Statistica Data Miner, Text Miner

• Statistica Data Visualization

• Statistica Extract, Transform, and Load (ETL)

• Statistica Process Optimization

• Statistica Quality Control (QC)

• Statistica Reporting Tables

• Statistica Sequence, Association and Link Analysis …

26/10/20156

Деятельность StatSoft Russia

26/10/20157

Консалтинг

Отраслевые решения:

• Sales-Forecast

Система автоматизации прогнозирования продаж

большого ассортимента товаров

• Energy-Forecast

Система автоматизации прогнозирования потребления

электроэнергии промышленными предприятиями, отдельными

объектами, регионами

• Map Analytical Tool

система визуализации результатов статистической обработки

на географических картах

• и другие решения

26/10/20158

Web ресурсы

.

26/10/20159

www.statsoft.com

www.statsoft.ru

www.statistica.ru

Клиенты

26/10/201510

26/10/201511

27 октября 2015 г.Открытый семинар StatSoft

Программа

• STATISTICA Big Data Analytics:

новые возможности

• Big Data в электронной коммерции:

взгляд практика

• Data Mining/Text Mining:

предиктивная аналитика

• Big Data в real-time рекламе:

задачи, методы, подходы, решения

• StatSoft Solutions:

автоматизация прогнозирования для retail, энергетики и др.

Обязательна предварительная регистрация на сайте www.statsoft.ru.

26/10/201512

26/10/201513

Dell Statistica Big Data Analytics Solution

Данные

• Управление ресурсами

• Поставщики

• Проектирование

• Контроль качества

• Мониторинг

• Испытания

• Маркетинг/Сбытовики

• Логистика

• База клиентов

• Служба поддержки

• Заявки

• Гарантийные ремонты

• IT-инфраструктура

• Парк оборудования

• Служба безопасности

• Бухгалтерия

• …

Данные в том или ином виде собирают

все

Источников все больше

Развитие технологий по сбору и хранению данных предоставляет

качественно новые возможности

• Сбор информации по отрасли

• Конкуренты

• Отслеживание реакции потребителей (массовый рынок)

• Социальные сети

26/10/201516

Бизнес аналитика – этоПредиктивная аналитика

Business intelligence

• Business intelligence (узк.) - это методы и инструменты для

построения информативных отчётов о текущей ситуации.

– Цель BI — предоставить нужную информацию тому человеку,

которому она необходима в нужное время.

Следующий этап BI

• Business Analytics (Бизнес-аналитика) – это инструменты,

используемые для преобразования, хранения, анализа, моделирования,

доставки и трассировки информации в ходе работы над задачами,

связанными с принятием решений на основе фактических данных.

– Получение знаний о бизнесе, добытых путем углубленного

анализа детальных данных и консолидированной

информации

BI или BA

BI BA

текущий уровень продаж прогноз продаж на неделю/месяц/год

количество клиентов по каналам профили клиентов по поведению/отклику

количество должников/ушедших клиентов предсказание кредитоспособности/ оттока/

мошенничества

число бракованных изделий предотвращение разладки процесса

затраты на маркетинговые акции прогнозирование эффекта маркетинговых

кампаний

количество товаров в заказе анализ корзины, подсказки для кросс-продаж

Описательная аналитика Предсказательная аналитика

Описательная аналитика

Отвечает на вопросы:– Что случилось?

– Почему случилось?

Инструменты:– Отчѐтность

– OLAP

– KPI

– Dashboards

– Прикладная

статистика

Предсказательная аналитика

Отвечает на вопросы:– Что случится?

– Когда случится?

Инструменты:– Прикладная

статистика

– Data mining

– Машинное обучение

– Моделирование

Возможности визуализации

2М/3МНесколько сотен

типов графиков

Все что нужно для анализа

!Огромное количество

процедур и методов

Statistica Big Data Analytics

• SBDA - это Suite, т.е. набор/комплект инструментов

– Набор технологий серии Hadoop из коробки

• Быстро устанавливается и почти не требует конфигурирования

– Набор коннекторов для сбора данных из внешних источников

– Поиск по хранимому контенту

– Встроенные средства аналитики

• Визуализация

• Машинное обучение

– Тесная взаимосвязь со Statistica

24

Что умеет SBDA?

• Crawling – «робот» для сбора данных из различных источников– Локальные документы

• Файловая система

• HDFS

• RDBMS

– Сайты

– Twitter

– Facebook

• Extracting – «парсинг» (обнаружение)– Люди

– Места

– Организации

– Даты

– Ссылки на другие документы

– Биологические термины

– …

Что еще умеет SBDA?

• Преобразования – фильтрация

• простая (линейная)

• случайная

• стратифицированная

• regexp

– группировка

– обработка текста, NLP• частотный анализ

• выделение сущностей

– конвертация

– …

• Анализ – визуализация

– построение сети социальных отношений

– анализ эмоциональной окраски высказываний

– глубокая аналитика на основе Mahout• Без навыков программирования

Визуализация

• Стандартные графики

– Столбчатая диаграмма

– Диаграммы рассеяния

– Круговая диаграмма

– Линейный график

– …

• Геокарты

• Хордовый график

• Древовидная карта

Пример поискового запроса: нефть

Графический интерфейс

• Большинство операций, как и в обычной Statistica делается с помощью

мышки

• Аналогично Statistica Data Miner создаются проекты обработки данных –

Analytics Workflows

– Узлы (Processing Elements)

– Связи

Мониторинг и администрирование

Итак

Dell обладает всесторонним, модульным портфолио, отинфраструктуры до управления информацией и

предиктивной аналитики.

Statistica позволяет Dell конкурировать в технологииБольших Данных и предлагает решения, позволяющие стать предприятию «data driven».

Statistica полная, легкая, масштабируемая и доступная платформа для предиктивной аналитики, приносящая выгоды в любой отрасли.

Спасибо!

32