1. Практические вопросы внедрения Vblock
Павел Миневич, компания I-Teco
Ведущий инженер
Minevich@i-teco.ru

2. «Ай-Теко» на рынке ИТ
 Ведущий системный интегратор и крупнейший поставщик информационных технологий
 Богатый опыт в ИТ-консалтинге и внедрении процессов управления ИТ, изложенных в библиотеке ITIL
 Разработчик собственного ПО и аналитических систем
 12 собственных региональных подразделений в России — Санкт-Петербург, Уфа, Ростов-на-Дону,
Ярославль, Пермь, Иркутск, Красноярск, Казань, Нижний Новгород, Магадан, Воронеж, Норильск.
 4 представительства в странах СНГ — Украина, Казахстан, Узбекистан, Азербайджан
 170 партнеров во всех субъектах РФ: от Калининграда до Петропавловска-Камчатского
 1 место в рейтинге крупнейших поставщиков ИТ для банков (CNews Analytics)
 1 место в рейтинге крупнейших поставщиков ИТ для управления персоналом (CNews Analytics)
 2 место по объему выручки на рынке IaaS (J’son & Partners Consulting)
 2 место крупнейших поставщиков ИТ-услуг банковскому сектору («РИА-Аналитика»)
 Топ-10 ведущих консультационных ИТ-компаний России («Коммерсантъ-ДЕНЬГИ»)
 Топ-10 крупнейших отечественных системных интеграторов (CNews Analytics)
 Tоп-10 крупнейших российских компаний в области ИКТ (РА «Эксперт»)
 Tоп-15 крупнейших ИТ-компаний России (CNews Analytics)
 Tоп-10 крупнейших поставщиков SaaS в России (CNews Analytics)
 Президент «Ай-Теко» Шамиль Шакиров в Тор-1000 бизнес-лидеров России как один из лучших высших
руководителей в ИТ-сфере («Коммерсантъ»)
 Председатель совета директоров Алексей Ремизов и Шамиль Шакиров входят в число Tоп-25 лучших
управляющих ИТ-компаний России (CRN/RE)
 Директор по стратегическому развитию Владимир Львов в Топ-5 лучших директоров по корпоративному
управлению в сфере ИТ («Коммерсантъ»)

3. Дата-центр «ТрастИнфо»
 Крупнейший коммерческий ЦОД РФ (CNews, 2011)
 Входит в Топ-5 крупнейших коммерческих ЦОД Московского региона (ИК «Современные
телекоммуникации», 2011)
 В июле 2011 года успешно прошел сертификацию на соответствие требованиям международного стандарта
PCI DSS (Payment Card Industry Data Security Standard).
 Системы Безопасности Дата-центра «ТрастИнфо» соответствуют требованиям международного стандарта
ISO/IEC 27001:2005
 Система управления ИТ-услугами соответствует требованиям международного стандарта ISO 20 000
 Система управления качеством соответствует требованиям международного стандарта ISO 9001:2000

4. Профиль клиента.
Информация о компании
Обширная региональная сеть
Одна из крупнейших нефтегазовых компаний в России
Большое количество пользователей бизнес-систем
Текущая инфраструктура
На первом этапе необходимо оптимизировать использование
аппаратных ресурсов в центральных офисах двух регионов
Большое количество гетерогенных систем
Системы распределены между несколькими офисами в пределах одного
города
Концепция «один сервер – много сервисов»
Отсутствие единой СХД и SAN
Отсутствие единой концепции управления
Цели проекта
 Оптимизация аппаратных ресурсов  Переход к концепции «одна система – один сервис»
 Создание единой управляемой среды  Возможность гибкого перераспределения ресурсов

5. Решение – Vblock.
Составляющие успеха
 Серверное оборудование Cisco UCS позволяет
быстро развертывать и динамически перемещать
профили серверов
 Системы хранения EMC VNX обеспечивают надежное
хранение и быстрый доступ к данным
 Платформа виртуализации VMware vSphere
увеличивает эффективность использования серверов
и предоставляет гибкую платформу для
унифицированных вычислений
Преимущества
 Тесно интегрированные компоненты управления –
Cisco UCS Manager, VMware vCenter, EMC Ionix UIM  Готовое, проверенное решение от альянса VCE –
VMware, Cisco, EMC
 Единое управление инфраструктурой
 Сертифицированные пакеты обновлений
 Простота внедрения и масштабирования
 Прозрачность инфраструктуры
 Легкое выделение и перераспределение
вычислительных ресурсов

6. Модели Vblock
300 EX 300 FX 300 GX 300 HX 700 LX 700 MX
Сервера Блейд-сервера Cisco UCS: B200 M2, B200 M3, B230 M2, B250 M2, B440 M2
Расширение До 16 До 32 До 64 До 64 До 64 До 64
серверов серверов серверов серверов серверов серверов
Фабрика Конвергентная фабрика Cisco 6248UP, 48 портов
Сеть Cisco Nexus 5548UP, Cisco Nexus 1000v, Cisco MDS 9148. Для модели MX возможно
использование Cisco MDS 9506, Cisco MDS 9513, Cisco Nexus 7010
Внешние порты 8 8 16 16 16 16
Система EMC VNX EMC VNX EMC VNX EMC VNX EMC EMC
хранения 5300 5500 5700 7500 Symmetrix Symmetrix
данных VMAX 10K VMAX 20K
Жесткие диски EFD, SAS, NL-SAS EFD, FC, SATA
Виртуализация VMware vSphere 4.0, 5.0, 5.1, VMware ESX/ESXi
Управление Cisco UCS Manager, EMC Unisphere, VMware vCenter Server
 Большой выбор моделей под конкретные требования
 Высокая масштабируемость
 Высокая производительность
 Все компоненты полностью протестированы для совместной работы

7. Vblock 300 EX и Vblock 300 FX

8. Стандартизация продуктов VCE
 Виртуализация, Сервера,
Хранение, Сеть и
Управление Безопасность
 Дизайн разработан заранее и
проверен, физическая и
Виртуализация логическая интеграция.
Конвергентная
 Упрощенное управление
инфраструктура и
облачные СХД  Каждое решение тщательно
вычисления протестировано
 Наличие Roadmap, проверка
Сеть взаимодействия
 Управление изменениями и
Вычислительные
обновлениями
ресурсы  Seamless support

9. Обзор AMP
 Внешняя (Out of Band) система управления для платформы Vblock
 Аппаратное обеспечение
 Рэк-сервера Cisco C200 с VMware ESXi
 Коммутаторы Cisco 3560
 Система хранения EMC VNXe 3100 (для HA-AMP)
 Управляющее программное обеспечение
 UIM
 VMware vSphere
 Cisco Nexus 1000v
 Программное обеспечение для управления СХД
 Назначение
 Разделение системы управления и продуктивной системы
 Обеспечивает гибкое и надежное управление
 Проблемы с АМР не приводят к деградации сервисов

10. Аппаратное обеспечение АМР
Mini
AMP
Mini-AMP HA AMP
• Размер 3 RU
• Один сервер C200
• Два Cisco Catalyst 3560
• ESXi 5.0
HA-AMP
• Размер 8 RU
• Два сервера C200
• Два Cisco Catalyst 3560
• СХД VNXe 3100
• ESXi 5.0

11. Mini AMP
Mini-AMP представляет собой один
сервер, использующий локальные
диски для загрузки ESXi. Mini-AMP
является базовой системой UIM
управления инфраструктурой.
vCenter Server
На него устанавливается комплект
систем управления. Эти vCenter Update Manager
управляющие машины позволяют
Database
производить логическую настройку
Vblock при производстве и Array Management
дальнейшем использовании.
Nexus 1000V VSM (2)

12. HA-AMP
HA-AMP представляет собой двух vCenter Server UIM
серверную систему, использующую
локальные диски для загрузки ESXi vCenter Update Manager Nexus 1000V VSM
и общую СХД для сервисов
управления Vblock. HA-AMP Database Array Mgmt Secondary
является отказоустойчивым
Array Management ESRS
средством управления
инфраструктурой. Other Mgmt VM’s
Nexus 1000V VSM
На него устанавливается комплект
систем управления. Эти HA/DRS Cluster
управляющие машины позволяют
производить логическую настройку
Vblock при производстве и
дальнейшем использовании.
VNXe 3100

13. Схема подключения HA-AMP
SAN NAS Customer
Network
SPA SPB SRV 2 SRV 3
9148-A 9148-B 5548-A 5548-B
HA-AMP
3560-A 3560-B OOB
6100-A 6100-B Mgmt
C200 C200
UCS – Blade 1 ESXi / vSwitch ESXi / vSwitch
vNIC 0 vHBA 0 vNIC 1 vHBA 1
Management
VSM VSM
VM’s
ESXi / 1000v VEM
Shared
Storage
Customer
VM

14. Развертывание Vblock

15. Дорожная карта: Планирование
Этап Описание
Запуск проекта Заказчик, партнер и VCE принимают решение
о начале проекта
Обследование площадки Описание требований к ДЦ, планирование
логистики и доставки
Описание логической конфигурации Описание требований и настроек
Составление спецификации по весу, питанию, Итоговые спецификации передаются
охлаждению заказчику для планирования
Создание проектной команды Соглашение о частоте и составу встреч
Проверка чек-листов Проектная команда проверяет и устраняет
выявленные недочеты
Составление списка оборудования Описание требований к оборудованию и
создание инвентаря
Лицензии Создание списка необходимых лицензий
Процедуры эскалации Определение процедур эскалации в процессе
внедрения
Определение команды внедрения Команда должна обладать соответствующими
навыками и компетенциями

16. Дорожная карта: Документация
Этап Описание
Техническое задание Стандартное или измененное. Описывает
этапы и процессы
План тестирования и приемки Определяет требования к плану тестирования
Документация для заказчика Составляется в процессе внедрения
План проекта Расписание проекта и сроки внедрения

17. Дорожная карта: Физическая сборка
Этап Описание
Подтверждение списка оборудования Инженеры согласовывают окончательный
список оборудования
Компоненты отправляются на фабрику VCE Единая конечная точка для всего оборудования
Составление инвентаря Список оборудования проверяется, все
серийные номера записываются
Монтаж в стойку Все оборудование устанавливается в стойку
согласно спецификации
Монтаж кабелей Оборудование каблируется согласно лучшим
практикам
Прохождение POST Все оборудование включается для выявление
проблем и проверки
Составление отчета перед отправкой на После составления отчета собранную систему
логическую сборку отправляют на логическую сборку

18. Дорожная карта: Логическая сборка
Этап Описание
Проверка совместимости компонент Настройка Vblock в соответствии со
стандартами VCE и текущей матрицей
совместимости. Upgrade/downgrade ПО в
случае необходимости
Конфигурация системы Настройка АМР, инсталляция UIM, настройка
компонент (СХД, сервера, сеть)
Настройка vBlock под нужды клиента Настройка Vblock для конкретного клиента —
IP адреса, номера VLAN, имена хостов

19. Дорожная карта: Установка оборудования
Этап Описание
Доставка Vblock на площадку клиента Акклиматизация оборудования
Перемещение Vblock на место работы Установка стоек, прокладка кабелей между
стойками и установка лезвий в корзины.
Клиент подключает питание к vBlock
Прохождение POST Все оборудование включается для выявления
проблем
Интеграция в сеть клиента Последние шаги логической сборки
завершены и Vblock подключается к
клиентской сети
Тестирование оборудования Проведение функциональных и стресс тестов.
Подписание протоколов
Передача документации Передача всей документации на проект
конечному пользователю
Регистрация системы в Seamless Support Документация отправляется в центр Seamless
Support для постановки на поддержку
Приветственное письмо от Seamless Support Контактная информация Seamless Support
Battle Card Краткий справочник клиента

20. Обследование площадки
Цели документа
Описание требований к площадке
Предоставить персоналу VCE знания о состоянии площадки,
условиях работы, логистических возможностях
Достичь 90% готовности Vblock на заводе
Что содержится в документе
Название сайта и контактная информация
 Стандартная информация, номер контракта
Готовность сайта
 Логистические возможности
 Готовность сети (Up-Link)
Правила доступа
 Правила доступа персонала
 Правила вноса и выноса оборудования
Кабели и соединения Самый важный инструмент
 Подробное описание способов подключения Vblock к сети
заказчика
Планы помещений и размещения оборудования
 Указание физического расположения оборудования
 Планирование соединений между шкафами
Питание, вес, охлаждение
 Тип и количество кабелей питания
 Возможности систем охлаждения
Управление изменениями
 Когда в дата-центре проводят профилактические работы?

21. Описание логической конфигурации
Правильное составление логической конфигурации — ключ к успешному
внедрению Vblock
Заполните опросник необходимыми данными
Обсудите документ. В обсуждении должны участвовать представители заказчика, VCE и партнера
Согласуйте все спорные моменты
Логическая постройка Vblock не может начаться без подписанного и согласованного Logical Build Guide
Что содержится в документе
VLAN — описание всех VLAN, используемых VCE при построении Vblock
Управляющие адреса — в явном виде указываются IP-адреса, используемые для управления оборудованием
Безопасность — различные вопросы, которые могут повлиять на соответствие системы требованиям
заказчика
Таблицы настроек АМР — общее управление, разрешение имен, настройки времени, настройки trap.
Внешние порты — описание способов подключения Vblock в продуктивную сеть заказчика
ID площадки и контракты — ESRS, Cisco Call Home, номера контрактов на поддержку.
Обязательные к обсуждению вопросы
Лицензии (Windows, SQL, VMware, 1000v, PowerPath)
Требования безопасности и интеграция vBlock
Внешние порты (тип и количество)
Порты управления
Настройки ESRS и Cisco Call Home

22. Производство
 Около 1000 м2
 9 производственных линий

23. Установка на площадке клиента
 Vblock прибывает на площадку
 Проверьте питание, охлаждение, места для установки и сеть
 Распакуйте, убедитесь в комплектности, переместите в место установки
 Установите UCS шасси и лезвия в стойки, подсоедините кабели
 Дождитесь акклиматизации
 Включите Vblock и убедитесь в отсутствии проблем
 Проверьте и обновите клиентское окружение
 Записи DNS
 Active Directory
 Почтовые сервисы
 Настройки ESRS
 Cisco Call Home
 Подсоедините внешние интерфейсы к клиентской сети
 Проверьте отказоустойчивость и функционал
 По очереди отключите питание от различных компонент: коммутаторы фабрики,
коммутаторы SAN, сетевые коммутаторы, один из серверов АМР, контроллер СХД
 Устраните выявленные недочеты

24. Передача инфраструктуры клиенту
 Обучение персонала клиенту
 Проведение технической сессии с командой поддержки заказчика
 Детальное рассмотрение всех элементов переданной инфраструктуры
 Сессия вопросов и ответов и демонстрация работы Vblock
 Подписание пакета документов и передача их заказчику
 Запуск скриптов для сбора информации о системе
 Сопоставление оборудования и полученной информации
 Результаты тестирования
 Приветственное письмо от Seamless Support и Battle Card
 Основной список оборудования
 Отправка подписанных документов в Seamless Support
 Получение отклика заказчика об инсталляции
 Customer Satisfaction Survey

25. Поддержка Vblock
 Единый контракт на поддержку
 Три контракта заменены одним
 Единая точка входа для всех проблем
 Служба поддержки
 Три уровня поддержки
 Доступ 24х7 Follow-the-sun
 Каждый инженер обладает компетенциями всех участников альянса
 Три типа поддержки
 VCE Core Support — базовая поддержка
 VCE Plus Support — управление ПО и проактивное
обслуживание
 VCE Premier Support — расширенная подержка с
полным циклом управления ПО и оборудованием

26. Спасибо за внимание!