Embed Size (px)
Citation preview
Управление большими данными на предприятиях
Эффективное использование BIG DATA и BI-
решений в промышленности
Александр Куликов
Руководитель отдела BI / Bayer
Команда Business Intelligence
C 2011 года разрабатываем систему бизнес-аналитики
На текущий момент
• больше 130 рабочих отчетов
• больше 750 активных пользователей
Компания
Bayer
инновационная компания со 150-летней историей,
занимающая ключевые позиции в сфере здравоохранения и
сельского хозяйства во всем мире. Мы разрабатываем новые
молекулы для инновационных продуктов и способы
улучшения здоровья людей, животных и растений.
Информационная революция
Каждый день в мире «создается»
2 500 000 000 000 000 000 байт информации
2.3 млн терабайт
90% всех данных в мире создано только за последние два года
https://www-01.ibm.com/software/data/bigdata/what-is-big-data.html
2014 - 2015
Вся человеческая история
Каждую минуту в интернете
Создается больше 350 000 сообщений в Твиттере
Загружается 400 часов видео на Youtube
Добавляется 2.5 млн фотографий в Instagram
Обновляется 3 млн статусов в Facebook
4 млн раз ставят “Лайк”
Google обрабатывает 4 млн запросов
https://www.gwava.com/blog/internet-data-created-daily
Развитие технологий
0
200
400
600
800
1000
1200
1400
1600
1800
1992 1997 2002 2007 2014 2019
Мл
рд
GB
Год Мировой интернет-траффик Стоимость хранения 1GB
1992 100 GB в день $10 000
1997 100 GB в час $1 000
2002 100 GB в сек $10
2007 2 000 GB в сек $1
2014 16 000 GB в сек $0.1
2019 52 000 GB в сек $0.01
$0
$2 000
$4 000
$6 000
$8 000
$10 000
$12 000
1992 1997 2002 2007 2014 2019
Пропускная способность растет Стоимость хранения падает
2 вопроса
Как с этим справиться?
И
Зачем вообще это делать?
BI – Business Intelligence
Set of techniques and tools
for the transformation of raw data
into meaningful and useful information
for business analysis purposes.
Howard Dresner, Gartner, 1989
Это методы и инструменты
для перевода сырых данных
в осмысленную, удобную для
восприятия информацию
для целей бизнес-анализа
Business Intelligence
Сырые данные загружаются в хранилище
Структурируются и обрабатываются
Представляются в удобной для восприятия форме
Big Data
В течение пяти лет объем данных вырастет на 800%
Причем 80% будут составлять неструктурированные данные
• Текст
• Видео
• Изображения
• Машинные записи
Big Data
В течение пяти лет объем данных вырастет на 800%
Причем 80% будут составлять неструктурированные данные
• Текст
• Видео
• Изображения
• «Интернет вещей»
Big Data
Увеличение дохода с каждого клиента
Быстрая реакция на изменения рынка
Ускорение вывода на рынок новых продуктов
Снижение расходов на хранение и транспортировку материалов
Оптимизация закупок и поставок
Контроль качества продукции
Возможности для производства
http://www.cioklub.com/pdfs/BI-for-Manufacturing-White-Paper.pdf
Возможности для производства
За счет упрощения и ускорения операционной отчетности
• Быстрое обновление стандартных отчетов
• Простое создание отчетов по нестандартным запросам
• Выявление специфических проблем
• Анализ данных из разных систем
• Сравнение с внешними и новыми данными
http://www.cioklub.com/pdfs/BI-for-Manufacturing-White-Paper.pdf
Где брать данные
Учетные системы
ERP MRP CRM
Внешние источники
Аналитика рынка
Статистика
Internet of Things
Датчики
Сенсоры
Логи
«Big data»
Как обрабатывать данные
Загрузка
Очистка
Интеграция
Аггрегация
Хранение
Архивация
Удаление
01
02
03
04
05
06
07
Как использовать данные
Machine Learning
Data mining
Регулярная отчетность
Отдельные запросы
Аналитика данных
Предсказательная аналитика BI
Особенности внедрения
Корпоративная
культура
Технологии Специалисты
Образ мышления Источники данных
Примеры использования
Сокращение расходов на тестирование на 3 млн $ с
помощью фокуса на нужных тестах
Примеры использования
Обслуживание ветряных турбин
Сокращение расходов
• Уменьшено время простоя и потери в производстве
• Улучшено планирование ресурсов
• Снижены расходы на ремонт
Примеры использования
1) Увеличение производительности 4 тыс дилеров
2) Персонифицированный маркетинг для конечных клиентов
3) Машины с телеметрическими датчиками
Спасибо за внимание
Александр Куликов
Руководитель отдела BI / Bayer
http://ru.linkedin.com/in/aleksanderkulikov
