Webzilla - новые сервисы и наш опыт достижения идеального аптайма
Использование облачной платформы OpenStack для реализации механизмов обработки и хранения больших массивов данных
1. Использование облачной платформы OpenStack
для реализации механизмов обработки и
хранения больших массивов данных
Мызгин Игорь,
взаимодействие с партнерами и клиентами
15 апреля 2014, Москва
2. План презентации
Три истории из жизни
Проблемы и ограничения
Что такое big data с точки зрения провайдера хостинга
OpenStack? А почему не Hadoop?
Кто мы и что мы можем предложить
Вопросы?
3. История №1 про 1С и маркетинг
Жила-была компания, занималась «оптово-розничной торговлей»,
использовала продукты 1С.
Маркетинг: OLAP кубы
Служба ИТ: Рост баз 1С в 10 раз, дополнительно блейд-корзина серверов
для обработки
4. История №1 про 1С и маркетинг
Маркетинг: «Эффективность каналов рекламы! Персонализация предложения!
Ценообразование исходя из товарных остатков! Догнать и перегнать Я.Маркет!»
Служба ИТ: «Дайте тележку денег?»
ЧТО ДЕЛАТЬ?
5. История №2 про видеонаблюдение
Жил-был город и хотели градоначальники сделать его «умным», решили
поставить видеокамеры по городу и хранить видео.
Архитектура «классическая» – видеокамеры, сервера сбора, централизованная СХД
6. История №2 про видеонаблюдение
ПИЛОТНОЕ ВНЕДРЕНИЕ –
ПРОШЛО УСПЕШНО!!!
Требования: по видеокамере в каждый подъезд, хранить месяц и чтобы софт
анализа видео мог все анализировать и искать
7. История №2 про видеонаблюдение
Проблемы:
1. IOPS
2. Объемы хранения 3. Сервера анализа и поиска
ЧТО ДЕЛАТЬ?
информации
8. История №3 про предиктивность
Все помнят баннеры? Баннеры не эффективны уже много лет.
«продают» то, что уже найдено и скорее всего куплено.
9. История №3 про предиктивность
БИХЕВИОРИЗМ И ПАТТЕРНЫ
ПОВЕДЕНИЯ
Если собрать много данных о
поведении человека в сети,
проанализировать их,
предположить о человеке гипотезы
(мальчикдевочка,
молодойпожилой, в бракехолост
и т.д.) – можно с высокой долей
вероятности предложить человеку
то, с чем он себя ассоциирует в
обществе.
10. Как?
Надо обработать все
тесты «герой какого ты
фильмав каком городе
ты должен житьв какой
эпохе стоило родиться»
Анализ не
структурированной
информации
Формирование
критериев и поиск
критериев исходя из
накопленной
информации
История №3 про предиктивность
1
2
11. Кто виноват и что делать?
Все три истории – о смене парадигмы.
Рост вверх и «топка ассигнациями»
заменяется на рост вширь и
переработку алгоритмов сбора,
хранения, обработки, консолидации
информации.
Комплекс алгоритмов и механизмов –
это и будем называть BigData
12. Но причем тутWebzilla и OpenStack?!
Все истории имеют happy end.
Все три истории реальные
Везде: Гибридная инфраструктура, которая сочетает в себе классические
услуги хостинга и облачную платформу на базе OpenStack.
14. Немного фактов о нас
> 1500
Международных
клиентов
1.5 тбитсек
пропускной способности
> 18K
Серверов > 1K
Используемых
серверных стоек
7
Tier 1 провайдеров
13
Точек присутствия
5
Дата-центров
700+ гбитсек
трафика
> 1K
Частных стыков с
партнерами
Факты о
Webzilla
15. Кто мы? Чем занимаемся?
13 точек присутствия по всему миру
16. OpenStack? Но почему не Hadoop?
Hadoop – комплекс технологий и механизмов для
распределенного хранения и обработки больших
массивов данных (не обязательно структурированных) с
помощью распределенных вычислений
Openstack - платформа управления распределенными
вычислениями и хранением больших объемов данных с
обеспечением необходимой инфраструктуры (сетевой,
управления жизненным циклом сущностей, системы
безопасности и мониторинга и т.д.)
Тренд на интеграцию поддержки Hadoop в платформу OpenStack.
17. WEBZILLA INSTANT FILES / INSTANT SERVERS
Платформа OpenStack Амстердам и Даллас
Механизмы
горизонтального
масштабирования
computing tasks и
хранения данных
API совместимость с
Amazon Web Services и
c Rackspace
18. WEBZILLA INSTANT SERVERS
Гибкое регулирование количества
ресурсов и оплата по потреблению
SSD диски для операций
интенсивного ввода-вывода
Построение приватных сетей и
виртуальных частных облаков
Мгновенное масштабирование
19. Трехкратное
резервирование данных
Бесплатная
репликация между
ЦОДами
Защита от случайного
удаления
Неограниченное
версионирование данных
100% pay-as-you-go
Неограниченный
размер хранилища
WEBZILLA INSTANT SERVERS
22. Переменные элементы
Программно определяемые
инфрастуктуры
Горизонтальное
масштабирование
Динамическое изменение
конфигураций приложений
через API инфраструктуры
Платформа Webzilla Instant
Servers/Instant Files
23. Преимущества гибридных инфраструктур
Максимизация предоставления ресурсов за минимум денег
по модели гибридной инфраструктуры
1
2
3
Поддержка legacy applications (тот же 1С условный) с их
специфическими требованиями (IOPS, latency, etc)
Инфраструктура для BigData проектов
24. Спасибо за внимание! Ваши вопросы?
ПРОМО: Экономия 25% при миграции на гибридную инфраструктуру
Мызгин Игорь,
взаимодействие с партнерами и клиентами
igor@webzilla.com
+7 916 779 74 70
+7 926 302 00 75
ENTERPRISE HOSTING SOLUTIONS