SlideShare a Scribd company logo
1 of 13
Download to read offline
Владимир Крумштейн
Эксперт по внедрению вычислительных систем КРОК
Москва, 2014 г.
Infiniband: сверхскорости на службе Вашего бизнеса
2
ПЛАН
• О технологии Infiniband: цели создания,
история, особенности
• Infiniband – это не только
суперкомпьютеры!
• Применения с продуктами Oracle,
Microsoft и др.
• Практический опыт внедрения
технологии Infiniband в компании КРОК
3
О ТЕХНОЛОГИИ INFINIBAND
Infiniband — это высокоскоростная коммутируемая последовательная шина,
применяющаяся как для внутренних (внутрисистемных), так и для межсистемных
соединений.
• IBTA: организация, формирующая стандарт
• Высокопроизводительный Interconnect
следующего поколения
• Производительность
• Надёжность
• Простота
Mellanox Technologies
• Лидер рынка – FDR уже доступен
• Решения для Ethernet и Infiniband
4
ОСОБЕННОСТИ IB
• Топология
• Отказоустойчивость
• Масштабируемость
• Защита инвестиций
• RDMA – что это и зачем?
5
ПРЕИМУЩЕСТВО IB №1 – СКОРОСТЬ!
Mellanox 56Gb/s FDR IB Intel 40Gb/s QDR IB Intel 10GbE NetEffect NE020
Пропускная
способность
6.8 GB/s 3.2 GB/s 1.1 GB/s
Задержка 0.7us 1.2us 7.22us
Сообщений в секунду 137 млн 30 млн 1.1 млн
SDR DDR QDR FDR EDR
1X 2,5 / 2 Гбит/с 5 / 4 Гбит/с 10 / 8 Гбит/с
14,0625 / 14
Гбит/с
25,78125 / 25
Гбит/с
4X 10 / 8 Гбит/с 20 / 16 Гбит/с 40 / 32 Гбит/с
56,25 / 56
Гбит/с
103,125 / 100
Гбит/с
12X 30 / 24 Гбит/с 60 / 48 Гбит/с 120 / 96 Гбит/с
168,75 / 168
Гбит/с
309,375 / 300
Гбит/с
Пропускная способность интерфейса Infiniband, raw / data
6
ПРЕИМУЩЕСТВО IB №2 –
ПРОСТОТА И НАДЕЖНОСТЬ!
• InfiniBand позволяет заменить три кабеля
— Ethernet, кабели к подсистеме
хранения и кабели межпроцессного
взаимодействия – одним соединением
• Автоконфигурирование портов/системы
• Сокращение потребления пропускной
способности памяти и контекстных
переключений
• Шесть режимов передачи данных
• Forward Error Correction, которая
позволяет устройствам InfiniBand
исправлять битовые ошибки в сети и
сокращает издержки на данные
транзакции
7
Mellanox Technologies
• Адаптеры. VPI – поддержка Eth и IB
• Коммутаторы. От 12 до 648 портов
• Кабели. Медные и оптические. QSFP
• Системы для метросетей. От 10 до 80 км
8
ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ
• Oracle Exadata
• OLTP
• Analytics
• Cloud
• VmWare
9
ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ
• Microsoft Parallel Data Warehouse
• SMB Direct
10
ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ
• ScaleMP
• До 32768 процессоров и 256Тбайт ОЗУ
• Поддержка виртуализации
11
• 2 ЦОДа, в каждом 200+ серверов
• Infiniband – основа сети
• Суммарный период эксплуатации –
с мая 2012
• Промышленная эксплуатация –
с апреля 2013
• Более 500 IB порта
• Около 340 серверов
• Без единого сбоя!
ПРАКТИЧЕСКИЙ ОПЫТ ВНЕДРЕНИЯ: ОБЛАКО КРОК
Отказоустойчивость Предсказуемость
Простота масштабированияПроизводительность
12
ОНИ ТОЖЕ ПРИМЕНЯЮТ INFINIBAND
13
СПАСИБО ЗА ВНИМАНИЕ!
Владимир Крумштейн
Эксперт по внедрению вычислительных систем КРОК
111033, Москва, ул. Волочаевская, д.5, корп.1
+7 495 974 2274 доб. 4692, +7 495 974 2277 (факс)
VKrumshtein@croc.ru
www.croc.ru

More Related Content

Similar to Infiniband сверхскорости на службе Вашего бизнеса

Криптография в АСУ ТП: необходимость, дань моде или желание заработать
Криптография в АСУ ТП: необходимость, дань моде или желание заработатьКриптография в АСУ ТП: необходимость, дань моде или желание заработать
Криптография в АСУ ТП: необходимость, дань моде или желание заработатьCisco Russia
 
Open stack на службе у глобальных телеком провайдеров
Open stack на службе у глобальных телеком провайдеровOpen stack на службе у глобальных телеком провайдеров
Open stack на службе у глобальных телеком провайдеровOpenStackRussia
 
Портфель продуктов Cisco в промышленном исполнении
Портфель продуктов Cisco в промышленном исполненииПортфель продуктов Cisco в промышленном исполнении
Портфель продуктов Cisco в промышленном исполненииCisco Russia
 
Вебинар С-Терра Шлюз 10G, 01.02.2017
Вебинар С-Терра Шлюз 10G, 01.02.2017Вебинар С-Терра Шлюз 10G, 01.02.2017
Вебинар С-Терра Шлюз 10G, 01.02.2017S-Terra CSP
 
Построение технологических сетей связи
Построение технологических сетей связиПостроение технологических сетей связи
Построение технологических сетей связиCisco Russia
 
Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000
Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000
Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000Cisco Russia
 
Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...
Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...
Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...Cisco Russia
 
9 оборудование moxa и front man в системах видеонаблюдения
9   оборудование moxa и front man в системах видеонаблюдения9   оборудование moxa и front man в системах видеонаблюдения
9 оборудование moxa и front man в системах видеонаблюденияjournalrubezh
 
Инновации беспроводных решений Cisco на службе Вашего бизнеса
Инновации беспроводных решений Cisco на службе Вашего бизнесаИнновации беспроводных решений Cisco на службе Вашего бизнеса
Инновации беспроводных решений Cisco на службе Вашего бизнесаCisco Russia
 
Оптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктур
Оптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктурОптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктур
Оптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктурКРОК
 
опыт построения крупных Vpn сетей на оборудовании код безопасности
опыт построения крупных Vpn сетей на оборудовании код безопасностиопыт построения крупных Vpn сетей на оборудовании код безопасности
опыт построения крупных Vpn сетей на оборудовании код безопасностиExpolink
 
Архитектура технологических сетей и индустриальные решения Cisco
Архитектура технологических сетей и индустриальные решения Cisco Архитектура технологических сетей и индустриальные решения Cisco
Архитектура технологических сетей и индустриальные решения Cisco Cisco Russia
 
Анастасия Марченко
Анастасия МарченкоАнастасия Марченко
Анастасия Марченкоit.times.com.ua
 
Инновации Cisco для коммутации в корпоративных сетях
Инновации Cisco для коммутации в корпоративных сетяхИнновации Cisco для коммутации в корпоративных сетях
Инновации Cisco для коммутации в корпоративных сетяхCisco Russia
 
Подход к обеспечению безопасности IoT в Enterprise
Подход к обеспечению безопасности IoT в EnterpriseПодход к обеспечению безопасности IoT в Enterprise
Подход к обеспечению безопасности IoT в EnterprisePositive Hack Days
 
Extreme CloudIQ overview
Extreme CloudIQ overviewExtreme CloudIQ overview
Extreme CloudIQ overviewMUK Extreme
 

Similar to Infiniband сверхскорости на службе Вашего бизнеса (20)

Криптография в АСУ ТП: необходимость, дань моде или желание заработать
Криптография в АСУ ТП: необходимость, дань моде или желание заработатьКриптография в АСУ ТП: необходимость, дань моде или желание заработать
Криптография в АСУ ТП: необходимость, дань моде или желание заработать
 
Комплексное решение для шахт
Комплексное решение для шахтКомплексное решение для шахт
Комплексное решение для шахт
 
Open stack на службе у глобальных телеком провайдеров
Open stack на службе у глобальных телеком провайдеровOpen stack на службе у глобальных телеком провайдеров
Open stack на службе у глобальных телеком провайдеров
 
Портфель продуктов Cisco в промышленном исполнении
Портфель продуктов Cisco в промышленном исполненииПортфель продуктов Cisco в промышленном исполнении
Портфель продуктов Cisco в промышленном исполнении
 
Вебинар С-Терра Шлюз 10G, 01.02.2017
Вебинар С-Терра Шлюз 10G, 01.02.2017Вебинар С-Терра Шлюз 10G, 01.02.2017
Вебинар С-Терра Шлюз 10G, 01.02.2017
 
Построение технологических сетей связи
Построение технологических сетей связиПостроение технологических сетей связи
Построение технологических сетей связи
 
Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000
Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000
Конвергентная транспортная инфраструктура Обзор платформы Cisco NCS 4000
 
Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...
Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...
Маршрутизаторы Cisco - от чего зависит производительность или как получить ма...
 
9 оборудование moxa и front man в системах видеонаблюдения
9   оборудование moxa и front man в системах видеонаблюдения9   оборудование moxa и front man в системах видеонаблюдения
9 оборудование moxa и front man в системах видеонаблюдения
 
Инновации беспроводных решений Cisco на службе Вашего бизнеса
Инновации беспроводных решений Cisco на службе Вашего бизнесаИнновации беспроводных решений Cisco на службе Вашего бизнеса
Инновации беспроводных решений Cisco на службе Вашего бизнеса
 
для промпредприятий
для промпредприятийдля промпредприятий
для промпредприятий
 
Sis для промпредприятий
Sis для промпредприятийSis для промпредприятий
Sis для промпредприятий
 
Оптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктур
Оптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктурОптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктур
Оптимизация ЦОД подходы ЕМС и Cisco к построению эффективных ИТ-инфраструктур
 
опыт построения крупных Vpn сетей на оборудовании код безопасности
опыт построения крупных Vpn сетей на оборудовании код безопасностиопыт построения крупных Vpn сетей на оборудовании код безопасности
опыт построения крупных Vpn сетей на оборудовании код безопасности
 
Архитектура технологических сетей и индустриальные решения Cisco
Архитектура технологических сетей и индустриальные решения Cisco Архитектура технологических сетей и индустриальные решения Cisco
Архитектура технологических сетей и индустриальные решения Cisco
 
Анастасия Марченко
Анастасия МарченкоАнастасия Марченко
Анастасия Марченко
 
Инновации Cisco для коммутации в корпоративных сетях
Инновации Cisco для коммутации в корпоративных сетяхИнновации Cisco для коммутации в корпоративных сетях
Инновации Cisco для коммутации в корпоративных сетях
 
Подход к обеспечению безопасности IoT в Enterprise
Подход к обеспечению безопасности IoT в EnterpriseПодход к обеспечению безопасности IoT в Enterprise
Подход к обеспечению безопасности IoT в Enterprise
 
cableScout
cableScoutcableScout
cableScout
 
Extreme CloudIQ overview
Extreme CloudIQ overviewExtreme CloudIQ overview
Extreme CloudIQ overview
 

More from КРОК

Каталог видео-курсов КРОК’ОК
Каталог видео-курсов КРОК’ОККаталог видео-курсов КРОК’ОК
Каталог видео-курсов КРОК’ОККРОК
 
Корпоративное онлайн-обучение
Корпоративное онлайн-обучениеКорпоративное онлайн-обучение
Корпоративное онлайн-обучениеКРОК
 
Решение КРОК для управления недвижимостью
Решение КРОК для управления недвижимостьюРешение КРОК для управления недвижимостью
Решение КРОК для управления недвижимостьюКРОК
 
Заоблачная репутация ИТ-департамента
Заоблачная репутация ИТ-департаментаЗаоблачная репутация ИТ-департамента
Заоблачная репутация ИТ-департаментаКРОК
 
Умное хранение — выжмите максимум из бизнес-данных!
Умное хранение — выжмите максимум из бизнес-данных!Умное хранение — выжмите максимум из бизнес-данных!
Умное хранение — выжмите максимум из бизнес-данных!КРОК
 
3D/VR инструменты в обучении персонала
3D/VR инструменты в обучении персонала3D/VR инструменты в обучении персонала
3D/VR инструменты в обучении персоналаКРОК
 
Что такое SDS?
Что такое SDS?Что такое SDS?
Что такое SDS?КРОК
 
Деловой подход к хранению данных
Деловой подход к хранению данныхДеловой подход к хранению данных
Деловой подход к хранению данныхКРОК
 
ЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных Систем
ЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных СистемЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных Систем
ЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных СистемКРОК
 
ВТБ24. Модернизация контактного центра
ВТБ24. Модернизация контактного центраВТБ24. Модернизация контактного центра
ВТБ24. Модернизация контактного центраКРОК
 
Tele2. Модернизация контактного центра
Tele2. Модернизация контактного центраTele2. Модернизация контактного центра
Tele2. Модернизация контактного центраКРОК
 
КРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центр
КРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центрКРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центр
КРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центрКРОК
 
Программный сервер видеоконференций Mind
Программный сервер видеоконференций MindПрограммный сервер видеоконференций Mind
Программный сервер видеоконференций MindКРОК
 
Решения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for businessРешения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for businessКРОК
 
Новые возможности при создании систем вкс
Новые возможности при создании систем вксНовые возможности при создании систем вкс
Новые возможности при создании систем вксКРОК
 
Cisco meeting server - переосмысление многоточечных конференций
Cisco meeting server - переосмысление многоточечных конференцийCisco meeting server - переосмысление многоточечных конференций
Cisco meeting server - переосмысление многоточечных конференцийКРОК
 
Решения на основе сервера вкс Vinteo
Решения на основе сервера вкс VinteoРешения на основе сервера вкс Vinteo
Решения на основе сервера вкс VinteoКРОК
 
Решения на основе сервера вкс Vinteo
Решения на основе сервера вкс VinteoРешения на основе сервера вкс Vinteo
Решения на основе сервера вкс VinteoКРОК
 
Решения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for businessРешения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for businessКРОК
 
Программный сервер видеоконференций Mind
Программный сервер видеоконференций MindПрограммный сервер видеоконференций Mind
Программный сервер видеоконференций MindКРОК
 

More from КРОК (20)

Каталог видео-курсов КРОК’ОК
Каталог видео-курсов КРОК’ОККаталог видео-курсов КРОК’ОК
Каталог видео-курсов КРОК’ОК
 
Корпоративное онлайн-обучение
Корпоративное онлайн-обучениеКорпоративное онлайн-обучение
Корпоративное онлайн-обучение
 
Решение КРОК для управления недвижимостью
Решение КРОК для управления недвижимостьюРешение КРОК для управления недвижимостью
Решение КРОК для управления недвижимостью
 
Заоблачная репутация ИТ-департамента
Заоблачная репутация ИТ-департаментаЗаоблачная репутация ИТ-департамента
Заоблачная репутация ИТ-департамента
 
Умное хранение — выжмите максимум из бизнес-данных!
Умное хранение — выжмите максимум из бизнес-данных!Умное хранение — выжмите максимум из бизнес-данных!
Умное хранение — выжмите максимум из бизнес-данных!
 
3D/VR инструменты в обучении персонала
3D/VR инструменты в обучении персонала3D/VR инструменты в обучении персонала
3D/VR инструменты в обучении персонала
 
Что такое SDS?
Что такое SDS?Что такое SDS?
Что такое SDS?
 
Деловой подход к хранению данных
Деловой подход к хранению данныхДеловой подход к хранению данных
Деловой подход к хранению данных
 
ЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных Систем
ЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных СистемЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных Систем
ЕЭК. Создание Программно-Аппаратного Комплекса Мультимедийных Систем
 
ВТБ24. Модернизация контактного центра
ВТБ24. Модернизация контактного центраВТБ24. Модернизация контактного центра
ВТБ24. Модернизация контактного центра
 
Tele2. Модернизация контактного центра
Tele2. Модернизация контактного центраTele2. Модернизация контактного центра
Tele2. Модернизация контактного центра
 
КРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центр
КРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центрКРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центр
КРОК. Клиенты на всю жизнь! что об этом знает ваш контакт центр
 
Программный сервер видеоконференций Mind
Программный сервер видеоконференций MindПрограммный сервер видеоконференций Mind
Программный сервер видеоконференций Mind
 
Решения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for businessРешения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for business
 
Новые возможности при создании систем вкс
Новые возможности при создании систем вксНовые возможности при создании систем вкс
Новые возможности при создании систем вкс
 
Cisco meeting server - переосмысление многоточечных конференций
Cisco meeting server - переосмысление многоточечных конференцийCisco meeting server - переосмысление многоточечных конференций
Cisco meeting server - переосмысление многоточечных конференций
 
Решения на основе сервера вкс Vinteo
Решения на основе сервера вкс VinteoРешения на основе сервера вкс Vinteo
Решения на основе сервера вкс Vinteo
 
Решения на основе сервера вкс Vinteo
Решения на основе сервера вкс VinteoРешения на основе сервера вкс Vinteo
Решения на основе сервера вкс Vinteo
 
Решения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for businessРешения для видеосвязи в среде Skype for business
Решения для видеосвязи в среде Skype for business
 
Программный сервер видеоконференций Mind
Программный сервер видеоконференций MindПрограммный сервер видеоконференций Mind
Программный сервер видеоконференций Mind
 

Infiniband сверхскорости на службе Вашего бизнеса

  • 1. Владимир Крумштейн Эксперт по внедрению вычислительных систем КРОК Москва, 2014 г. Infiniband: сверхскорости на службе Вашего бизнеса
  • 2. 2 ПЛАН • О технологии Infiniband: цели создания, история, особенности • Infiniband – это не только суперкомпьютеры! • Применения с продуктами Oracle, Microsoft и др. • Практический опыт внедрения технологии Infiniband в компании КРОК
  • 3. 3 О ТЕХНОЛОГИИ INFINIBAND Infiniband — это высокоскоростная коммутируемая последовательная шина, применяющаяся как для внутренних (внутрисистемных), так и для межсистемных соединений. • IBTA: организация, формирующая стандарт • Высокопроизводительный Interconnect следующего поколения • Производительность • Надёжность • Простота Mellanox Technologies • Лидер рынка – FDR уже доступен • Решения для Ethernet и Infiniband
  • 4. 4 ОСОБЕННОСТИ IB • Топология • Отказоустойчивость • Масштабируемость • Защита инвестиций • RDMA – что это и зачем?
  • 5. 5 ПРЕИМУЩЕСТВО IB №1 – СКОРОСТЬ! Mellanox 56Gb/s FDR IB Intel 40Gb/s QDR IB Intel 10GbE NetEffect NE020 Пропускная способность 6.8 GB/s 3.2 GB/s 1.1 GB/s Задержка 0.7us 1.2us 7.22us Сообщений в секунду 137 млн 30 млн 1.1 млн SDR DDR QDR FDR EDR 1X 2,5 / 2 Гбит/с 5 / 4 Гбит/с 10 / 8 Гбит/с 14,0625 / 14 Гбит/с 25,78125 / 25 Гбит/с 4X 10 / 8 Гбит/с 20 / 16 Гбит/с 40 / 32 Гбит/с 56,25 / 56 Гбит/с 103,125 / 100 Гбит/с 12X 30 / 24 Гбит/с 60 / 48 Гбит/с 120 / 96 Гбит/с 168,75 / 168 Гбит/с 309,375 / 300 Гбит/с Пропускная способность интерфейса Infiniband, raw / data
  • 6. 6 ПРЕИМУЩЕСТВО IB №2 – ПРОСТОТА И НАДЕЖНОСТЬ! • InfiniBand позволяет заменить три кабеля — Ethernet, кабели к подсистеме хранения и кабели межпроцессного взаимодействия – одним соединением • Автоконфигурирование портов/системы • Сокращение потребления пропускной способности памяти и контекстных переключений • Шесть режимов передачи данных • Forward Error Correction, которая позволяет устройствам InfiniBand исправлять битовые ошибки в сети и сокращает издержки на данные транзакции
  • 7. 7 Mellanox Technologies • Адаптеры. VPI – поддержка Eth и IB • Коммутаторы. От 12 до 648 портов • Кабели. Медные и оптические. QSFP • Системы для метросетей. От 10 до 80 км
  • 8. 8 ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ • Oracle Exadata • OLTP • Analytics • Cloud • VmWare
  • 9. 9 ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ • Microsoft Parallel Data Warehouse • SMB Direct
  • 10. 10 ИНТЕГРАЦИЯ С СУЩЕСТВУЮЩИМИ СИСТЕМАМИ • ScaleMP • До 32768 процессоров и 256Тбайт ОЗУ • Поддержка виртуализации
  • 11. 11 • 2 ЦОДа, в каждом 200+ серверов • Infiniband – основа сети • Суммарный период эксплуатации – с мая 2012 • Промышленная эксплуатация – с апреля 2013 • Более 500 IB порта • Около 340 серверов • Без единого сбоя! ПРАКТИЧЕСКИЙ ОПЫТ ВНЕДРЕНИЯ: ОБЛАКО КРОК Отказоустойчивость Предсказуемость Простота масштабированияПроизводительность
  • 13. 13 СПАСИБО ЗА ВНИМАНИЕ! Владимир Крумштейн Эксперт по внедрению вычислительных систем КРОК 111033, Москва, ул. Волочаевская, д.5, корп.1 +7 495 974 2274 доб. 4692, +7 495 974 2277 (факс) VKrumshtein@croc.ru www.croc.ru