SlideShare a Scribd company logo
1 of 7
Кейсы применения Big Data
в Интернете вещей
Виктор Поляков,
генеральный директор Tibbo Systems
Вещи производят реально «большие» данные
• Устройства мира IoT – одни из самых активных генераторов
данных
• Промышленная установка обычно генерирует 2000-10000
сигналов в секунду, а предприятие – до 100 тысяч сигналов
в секунду, то есть до 10 миллиардов в день
• Сравните с количеством банковских транзакций или заявок
на оценку кредитных рисков
• Первой проблемой является хранение
• Озеро данных на основе IoT платформы – это комбинация
реляционных, NoSQL, key-value, графовых, кольцевых,
файловых и других типов СУБД
- 2 -
Аналитика в IoT
Аналитические модули, которые «ловят рыбу» (паттерны и
обоснования управленческих решений) в озере данных:
• Машинное обучение (предсказание, выявление аномалий,
классификация)
• Потоковая обработка данных (StreamSQL), корреляция и
поиск первопричины событий
• Выполнение what-if анализа
• Автоматизированная работа с многомерными кубами
(OLAP)
• Создание динамических моделей процессов и объектов –
цифровых двойников
- 2 -
Отличие Industry 3.0 от Industry 4.0
• Очевидный первый ответ – «принятие решений без участия
человека» – не является правильным
• Разница в подходе к данным
• Системы цифрового предприятия редко взаимодействуют
напрямую, вместо этого они анализируют опыт предыдущих
лет и оптимизируют свое поведение на основе озера
данных
• Технологическая шина – река, по которой данные текут в
озеро
• На данный момент практически любое предприятие может
получить экономический эффект от глубокой аналитики
• IoT сливается с Big Data и аналитикой
- 2 -
Примеры Big Data в IoT
• Технологическая шина и АСТУЭ в ТрансНефтьЭнерго: 40
серверов на пяти уровнях, около 2 млн каналов, сотни тысяч
сигналов в секунду
• Мониторинг исследовательского ядерно-нейтронного
реактора, Санкт-Петербургский Институт Ядерной Физики:
18000 тэгов, частота опроса 10 гц, сбор данных с шасси
реального времени National Instruments, лабораторный
анализ исходных данных (осциллограмм) без агрегации
• Мониторинг зон хранения урожая сахарной свеклы,
Русагро: прогнозные модели на основе данных с нескольких
тысяч датчиков, прогноза погоды и многих других
показателей
- 4 -
Примеры Big Data в IoT (продолжение)
• Мониторинг сети доступа крупного телекома: 500 000
единиц сетевого оборудование генерируют около 100 млн
событий в день, по итогам автоматической корреляции
остается около 10 000 событий значимых для операторов
• Система комплексной автоматизации морского порта Huelva
Port Authority в Испании: около 2 млн событий о погрузке,
разгрузке, смене зон хранения и изменении внутреннего
состояния контейнеров в день, получаемых с RFID
считывателей, сложная аналитика для оптимизации
логистических процессов
• Система мониторинга услуг электронного правительства
Казахстана: появление каждой заявки в каждой точке ИТ
инфраструктуры является отдельным объектом анализа
- 4 -
Спасибо за
внимание
Виктор Поляков,
victor@tibbo.com

More Related Content

Similar to Примеры применения BigData в Интернете вещей

Case (iidf) team 3 (rus)
Case (iidf)   team 3 (rus)Case (iidf)   team 3 (rus)
Case (iidf) team 3 (rus)EVA
 
Кибербезопасность Industrial IoT: мировые тенденции и российскиие реалии
Кибербезопасность Industrial IoT: мировые тенденции и российскиие реалииКибербезопасность Industrial IoT: мировые тенденции и российскиие реалии
Кибербезопасность Industrial IoT: мировые тенденции и российскиие реалииAleksey Lukatskiy
 
Решения крок для учебных заведений
Решения крок для учебных заведенийРешения крок для учебных заведений
Решения крок для учебных заведенийКРОК
 
Презентация Сколково на конференции Перспективные системы и задачи упралвления
 Презентация Сколково на конференции Перспективные системы и задачи упралвления Презентация Сколково на конференции Перспективные системы и задачи упралвления
Презентация Сколково на конференции Перспективные системы и задачи упралвленияAlbert Yefimov
 
Кибербезопасность промышленного Интернета вещей
Кибербезопасность промышленного Интернета вещейКибербезопасность промышленного Интернета вещей
Кибербезопасность промышленного Интернета вещейAleksey Lukatskiy
 
Промышленный (индустриальный) интернет в России и мире
Промышленный (индустриальный) интернет в России и мире Промышленный (индустриальный) интернет в России и мире
Промышленный (индустриальный) интернет в России и мире Alexey Kondrashov
 
Анатомия Облаков
Анатомия ОблаковАнатомия Облаков
Анатомия ОблаковAnton Saloff
 
Телеком - взгляд в будущее
Телеком - взгляд в будущееТелеком - взгляд в будущее
Телеком - взгляд в будущееDzmitry Yashyn
 
Стратегия развития технологий Интернета Вещей в Cisco
Стратегия развития технологий Интернета Вещей в CiscoСтратегия развития технологий Интернета Вещей в Cisco
Стратегия развития технологий Интернета Вещей в CiscoCisco Russia
 
Windows Embedded Day - От устройств к облаку - референсная архитектура IoT
Windows Embedded Day - От устройств к облаку - референсная архитектура IoTWindows Embedded Day - От устройств к облаку - референсная архитектура IoT
Windows Embedded Day - От устройств к облаку - референсная архитектура IoTMicrosoft
 
Сверхширокополосные беспроводные сети связи и сенсорные сети
Сверхширокополосные беспроводные сети связи и сенсорные сетиСверхширокополосные беспроводные сети связи и сенсорные сети
Сверхширокополосные беспроводные сети связи и сенсорные сетиAnamezon
 
Применение IoT платформы AggreGate в энергетике
Применение IoT платформы AggreGate в энергетикеПрименение IoT платформы AggreGate в энергетике
Применение IoT платформы AggreGate в энергетикеTibbo
 
РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...
РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...
РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...Тарасов Константин
 
РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?
РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?
РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?Тарасов Константин
 
Реализация требований по защите информации в соответствии с положением Банка ...
Реализация требований по защите информации в соответствии с положением Банка ...Реализация требований по защите информации в соответствии с положением Банка ...
Реализация требований по защите информации в соответствии с положением Банка ...DialogueScience
 
Одна лекция из мира Big Data: тренды, кейсы и технологии
Одна лекция из мира Big Data: тренды, кейсы и технологии Одна лекция из мира Big Data: тренды, кейсы и технологии
Одна лекция из мира Big Data: тренды, кейсы и технологии Evgeniy Pavlovskiy
 
Лев Палей. Центр экспертизы информационной безопасности в электроэнергетике
Лев Палей. Центр экспертизы информационной безопасности в электроэнергетикеЛев Палей. Центр экспертизы информационной безопасности в электроэнергетике
Лев Палей. Центр экспертизы информационной безопасности в электроэнергетикеKaspersky
 
Использование Vertica для управления данными, фиксируемыми интеллектуальными ...
Использование Vertica для управления данными, фиксируемыми интеллектуальными ...Использование Vertica для управления данными, фиксируемыми интеллектуальными ...
Использование Vertica для управления данными, фиксируемыми интеллектуальными ...Elizaveta Alekseeva
 
Использование аналитической платформы HPE Vertica для управления большими объ...
Использование аналитической платформы HPE Vertica для управления большими объ...Использование аналитической платформы HPE Vertica для управления большими объ...
Использование аналитической платформы HPE Vertica для управления большими объ...Yuri Yashkin
 

Similar to Примеры применения BigData в Интернете вещей (20)

Case (iidf) team 3 (rus)
Case (iidf)   team 3 (rus)Case (iidf)   team 3 (rus)
Case (iidf) team 3 (rus)
 
Кибербезопасность Industrial IoT: мировые тенденции и российскиие реалии
Кибербезопасность Industrial IoT: мировые тенденции и российскиие реалииКибербезопасность Industrial IoT: мировые тенденции и российскиие реалии
Кибербезопасность Industrial IoT: мировые тенденции и российскиие реалии
 
Решения крок для учебных заведений
Решения крок для учебных заведенийРешения крок для учебных заведений
Решения крок для учебных заведений
 
Презентация Сколково на конференции Перспективные системы и задачи упралвления
 Презентация Сколково на конференции Перспективные системы и задачи упралвления Презентация Сколково на конференции Перспективные системы и задачи упралвления
Презентация Сколково на конференции Перспективные системы и задачи упралвления
 
Кибербезопасность промышленного Интернета вещей
Кибербезопасность промышленного Интернета вещейКибербезопасность промышленного Интернета вещей
Кибербезопасность промышленного Интернета вещей
 
Промышленный (индустриальный) интернет в России и мире
Промышленный (индустриальный) интернет в России и мире Промышленный (индустриальный) интернет в России и мире
Промышленный (индустриальный) интернет в России и мире
 
Анатомия Облаков
Анатомия ОблаковАнатомия Облаков
Анатомия Облаков
 
Телеком - взгляд в будущее
Телеком - взгляд в будущееТелеком - взгляд в будущее
Телеком - взгляд в будущее
 
Стратегия развития технологий Интернета Вещей в Cisco
Стратегия развития технологий Интернета Вещей в CiscoСтратегия развития технологий Интернета Вещей в Cisco
Стратегия развития технологий Интернета Вещей в Cisco
 
Windows Embedded Day - От устройств к облаку - референсная архитектура IoT
Windows Embedded Day - От устройств к облаку - референсная архитектура IoTWindows Embedded Day - От устройств к облаку - референсная архитектура IoT
Windows Embedded Day - От устройств к облаку - референсная архитектура IoT
 
Сверхширокополосные беспроводные сети связи и сенсорные сети
Сверхширокополосные беспроводные сети связи и сенсорные сетиСверхширокополосные беспроводные сети связи и сенсорные сети
Сверхширокополосные беспроводные сети связи и сенсорные сети
 
Применение IoT платформы AggreGate в энергетике
Применение IoT платформы AggreGate в энергетикеПрименение IoT платформы AggreGate в энергетике
Применение IoT платформы AggreGate в энергетике
 
РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...
РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...
РИФ 2016, Исследовательская комиссия стандартизации Интернета вещей №20 Между...
 
РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?
РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?
РИФ 2016, Умные вещи и подключенные системы. Что это и как с этим работать?
 
Реализация требований по защите информации в соответствии с положением Банка ...
Реализация требований по защите информации в соответствии с положением Банка ...Реализация требований по защите информации в соответствии с положением Банка ...
Реализация требований по защите информации в соответствии с положением Банка ...
 
Big data must ife
Big data must ifeBig data must ife
Big data must ife
 
Одна лекция из мира Big Data: тренды, кейсы и технологии
Одна лекция из мира Big Data: тренды, кейсы и технологии Одна лекция из мира Big Data: тренды, кейсы и технологии
Одна лекция из мира Big Data: тренды, кейсы и технологии
 
Лев Палей. Центр экспертизы информационной безопасности в электроэнергетике
Лев Палей. Центр экспертизы информационной безопасности в электроэнергетикеЛев Палей. Центр экспертизы информационной безопасности в электроэнергетике
Лев Палей. Центр экспертизы информационной безопасности в электроэнергетике
 
Использование Vertica для управления данными, фиксируемыми интеллектуальными ...
Использование Vertica для управления данными, фиксируемыми интеллектуальными ...Использование Vertica для управления данными, фиксируемыми интеллектуальными ...
Использование Vertica для управления данными, фиксируемыми интеллектуальными ...
 
Использование аналитической платформы HPE Vertica для управления большими объ...
Использование аналитической платформы HPE Vertica для управления большими объ...Использование аналитической платформы HPE Vertica для управления большими объ...
Использование аналитической платформы HPE Vertica для управления большими объ...
 

More from Tibbo

Преодоление сложностей в технологических стартапах
Преодоление сложностей в технологических стартапахПреодоление сложностей в технологических стартапах
Преодоление сложностей в технологических стартапахTibbo
 
Роль больших данных и аналитики в развитии IoT
Роль больших данных и аналитики в развитии IoTРоль больших данных и аналитики в развитии IoT
Роль больших данных и аналитики в развитии IoTTibbo
 
Big Data in IoT
Big Data in IoTBig Data in IoT
Big Data in IoTTibbo
 
Проекты Tibbo Systems в области индустриального Интернета вещей
Проекты Tibbo Systems в области индустриального Интернета вещейПроекты Tibbo Systems в области индустриального Интернета вещей
Проекты Tibbo Systems в области индустриального Интернета вещейTibbo
 
AggreGate Industrial IoT Projects
AggreGate Industrial IoT ProjectsAggreGate Industrial IoT Projects
AggreGate Industrial IoT ProjectsTibbo
 
AggreGate Power Engineering Application
AggreGate Power Engineering ApplicationAggreGate Power Engineering Application
AggreGate Power Engineering ApplicationTibbo
 
IoT in Agriculture
IoT in AgricultureIoT in Agriculture
IoT in AgricultureTibbo
 
Will SCADA Systems Survive? The Future of Distributed Management Systems
Will SCADA Systems Survive? The Future of Distributed Management SystemsWill SCADA Systems Survive? The Future of Distributed Management Systems
Will SCADA Systems Survive? The Future of Distributed Management SystemsTibbo
 
Выживут ли SCADA? О будущем распределенных систем управления
Выживут ли SCADA? О будущем распределенных систем управленияВыживут ли SCADA? О будущем распределенных систем управления
Выживут ли SCADA? О будущем распределенных систем управленияTibbo
 
Open platform communications (opc) server from tibbo technology
Open platform communications (opc) server from tibbo technologyOpen platform communications (opc) server from tibbo technology
Open platform communications (opc) server from tibbo technologyTibbo
 
Smart City As Unified Multi-tier IoT Solution
Smart City As Unified Multi-tier IoT SolutionSmart City As Unified Multi-tier IoT Solution
Smart City As Unified Multi-tier IoT SolutionTibbo
 
Predictive Maintenance in the Industrial Internet of Things
Predictive Maintenance in the Industrial Internet of ThingsPredictive Maintenance in the Industrial Internet of Things
Predictive Maintenance in the Industrial Internet of ThingsTibbo
 
Прогностическое сервисное обслуживание на основе технологий промышленного Инт...
Прогностическое сервисное обслуживание на основе технологий промышленного Инт...Прогностическое сервисное обслуживание на основе технологий промышленного Инт...
Прогностическое сервисное обслуживание на основе технологий промышленного Инт...Tibbo
 
Data center and industrial IT infrastructure monitoring practices
Data center and industrial IT infrastructure monitoring practicesData center and industrial IT infrastructure monitoring practices
Data center and industrial IT infrastructure monitoring practicesTibbo
 
Практика мониторинга ИТ-инфраструктур промышленных компаний и ЦОД
Практика мониторинга ИТ-инфраструктур промышленных компаний и ЦОДПрактика мониторинга ИТ-инфраструктур промышленных компаний и ЦОД
Практика мониторинга ИТ-инфраструктур промышленных компаний и ЦОДTibbo
 
Internet of Things Anatomy
Internet of Things AnatomyInternet of Things Anatomy
Internet of Things AnatomyTibbo
 
Integrated automation of low-rise construction sites aimed to improve managem...
Integrated automation of low-rise construction sites aimed to improve managem...Integrated automation of low-rise construction sites aimed to improve managem...
Integrated automation of low-rise construction sites aimed to improve managem...Tibbo
 
Комплексная автоматизация объектов малоэтажного строительства с целью повышен...
Комплексная автоматизация объектов малоэтажного строительства с целью повышен...Комплексная автоматизация объектов малоэтажного строительства с целью повышен...
Комплексная автоматизация объектов малоэтажного строительства с целью повышен...Tibbo
 
AggreGate SCADA/HMI. Промышленная автоматизация
AggreGate SCADA/HMI. Промышленная автоматизацияAggreGate SCADA/HMI. Промышленная автоматизация
AggreGate SCADA/HMI. Промышленная автоматизацияTibbo
 
AggreGate Network Manager. Мониторинг IT и управление сетями
AggreGate Network Manager. Мониторинг IT и управление сетямиAggreGate Network Manager. Мониторинг IT и управление сетями
AggreGate Network Manager. Мониторинг IT и управление сетямиTibbo
 

More from Tibbo (20)

Преодоление сложностей в технологических стартапах
Преодоление сложностей в технологических стартапахПреодоление сложностей в технологических стартапах
Преодоление сложностей в технологических стартапах
 
Роль больших данных и аналитики в развитии IoT
Роль больших данных и аналитики в развитии IoTРоль больших данных и аналитики в развитии IoT
Роль больших данных и аналитики в развитии IoT
 
Big Data in IoT
Big Data in IoTBig Data in IoT
Big Data in IoT
 
Проекты Tibbo Systems в области индустриального Интернета вещей
Проекты Tibbo Systems в области индустриального Интернета вещейПроекты Tibbo Systems в области индустриального Интернета вещей
Проекты Tibbo Systems в области индустриального Интернета вещей
 
AggreGate Industrial IoT Projects
AggreGate Industrial IoT ProjectsAggreGate Industrial IoT Projects
AggreGate Industrial IoT Projects
 
AggreGate Power Engineering Application
AggreGate Power Engineering ApplicationAggreGate Power Engineering Application
AggreGate Power Engineering Application
 
IoT in Agriculture
IoT in AgricultureIoT in Agriculture
IoT in Agriculture
 
Will SCADA Systems Survive? The Future of Distributed Management Systems
Will SCADA Systems Survive? The Future of Distributed Management SystemsWill SCADA Systems Survive? The Future of Distributed Management Systems
Will SCADA Systems Survive? The Future of Distributed Management Systems
 
Выживут ли SCADA? О будущем распределенных систем управления
Выживут ли SCADA? О будущем распределенных систем управленияВыживут ли SCADA? О будущем распределенных систем управления
Выживут ли SCADA? О будущем распределенных систем управления
 
Open platform communications (opc) server from tibbo technology
Open platform communications (opc) server from tibbo technologyOpen platform communications (opc) server from tibbo technology
Open platform communications (opc) server from tibbo technology
 
Smart City As Unified Multi-tier IoT Solution
Smart City As Unified Multi-tier IoT SolutionSmart City As Unified Multi-tier IoT Solution
Smart City As Unified Multi-tier IoT Solution
 
Predictive Maintenance in the Industrial Internet of Things
Predictive Maintenance in the Industrial Internet of ThingsPredictive Maintenance in the Industrial Internet of Things
Predictive Maintenance in the Industrial Internet of Things
 
Прогностическое сервисное обслуживание на основе технологий промышленного Инт...
Прогностическое сервисное обслуживание на основе технологий промышленного Инт...Прогностическое сервисное обслуживание на основе технологий промышленного Инт...
Прогностическое сервисное обслуживание на основе технологий промышленного Инт...
 
Data center and industrial IT infrastructure monitoring practices
Data center and industrial IT infrastructure monitoring practicesData center and industrial IT infrastructure monitoring practices
Data center and industrial IT infrastructure monitoring practices
 
Практика мониторинга ИТ-инфраструктур промышленных компаний и ЦОД
Практика мониторинга ИТ-инфраструктур промышленных компаний и ЦОДПрактика мониторинга ИТ-инфраструктур промышленных компаний и ЦОД
Практика мониторинга ИТ-инфраструктур промышленных компаний и ЦОД
 
Internet of Things Anatomy
Internet of Things AnatomyInternet of Things Anatomy
Internet of Things Anatomy
 
Integrated automation of low-rise construction sites aimed to improve managem...
Integrated automation of low-rise construction sites aimed to improve managem...Integrated automation of low-rise construction sites aimed to improve managem...
Integrated automation of low-rise construction sites aimed to improve managem...
 
Комплексная автоматизация объектов малоэтажного строительства с целью повышен...
Комплексная автоматизация объектов малоэтажного строительства с целью повышен...Комплексная автоматизация объектов малоэтажного строительства с целью повышен...
Комплексная автоматизация объектов малоэтажного строительства с целью повышен...
 
AggreGate SCADA/HMI. Промышленная автоматизация
AggreGate SCADA/HMI. Промышленная автоматизацияAggreGate SCADA/HMI. Промышленная автоматизация
AggreGate SCADA/HMI. Промышленная автоматизация
 
AggreGate Network Manager. Мониторинг IT и управление сетями
AggreGate Network Manager. Мониторинг IT и управление сетямиAggreGate Network Manager. Мониторинг IT и управление сетями
AggreGate Network Manager. Мониторинг IT и управление сетями
 

Примеры применения BigData в Интернете вещей

  • 1. Кейсы применения Big Data в Интернете вещей Виктор Поляков, генеральный директор Tibbo Systems
  • 2. Вещи производят реально «большие» данные • Устройства мира IoT – одни из самых активных генераторов данных • Промышленная установка обычно генерирует 2000-10000 сигналов в секунду, а предприятие – до 100 тысяч сигналов в секунду, то есть до 10 миллиардов в день • Сравните с количеством банковских транзакций или заявок на оценку кредитных рисков • Первой проблемой является хранение • Озеро данных на основе IoT платформы – это комбинация реляционных, NoSQL, key-value, графовых, кольцевых, файловых и других типов СУБД - 2 -
  • 3. Аналитика в IoT Аналитические модули, которые «ловят рыбу» (паттерны и обоснования управленческих решений) в озере данных: • Машинное обучение (предсказание, выявление аномалий, классификация) • Потоковая обработка данных (StreamSQL), корреляция и поиск первопричины событий • Выполнение what-if анализа • Автоматизированная работа с многомерными кубами (OLAP) • Создание динамических моделей процессов и объектов – цифровых двойников - 2 -
  • 4. Отличие Industry 3.0 от Industry 4.0 • Очевидный первый ответ – «принятие решений без участия человека» – не является правильным • Разница в подходе к данным • Системы цифрового предприятия редко взаимодействуют напрямую, вместо этого они анализируют опыт предыдущих лет и оптимизируют свое поведение на основе озера данных • Технологическая шина – река, по которой данные текут в озеро • На данный момент практически любое предприятие может получить экономический эффект от глубокой аналитики • IoT сливается с Big Data и аналитикой - 2 -
  • 5. Примеры Big Data в IoT • Технологическая шина и АСТУЭ в ТрансНефтьЭнерго: 40 серверов на пяти уровнях, около 2 млн каналов, сотни тысяч сигналов в секунду • Мониторинг исследовательского ядерно-нейтронного реактора, Санкт-Петербургский Институт Ядерной Физики: 18000 тэгов, частота опроса 10 гц, сбор данных с шасси реального времени National Instruments, лабораторный анализ исходных данных (осциллограмм) без агрегации • Мониторинг зон хранения урожая сахарной свеклы, Русагро: прогнозные модели на основе данных с нескольких тысяч датчиков, прогноза погоды и многих других показателей - 4 -
  • 6. Примеры Big Data в IoT (продолжение) • Мониторинг сети доступа крупного телекома: 500 000 единиц сетевого оборудование генерируют около 100 млн событий в день, по итогам автоматической корреляции остается около 10 000 событий значимых для операторов • Система комплексной автоматизации морского порта Huelva Port Authority в Испании: около 2 млн событий о погрузке, разгрузке, смене зон хранения и изменении внутреннего состояния контейнеров в день, получаемых с RFID считывателей, сложная аналитика для оптимизации логистических процессов • Система мониторинга услуг электронного правительства Казахстана: появление каждой заявки в каждой точке ИТ инфраструктуры является отдельным объектом анализа - 4 -