Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
Cистемы
с непосредственным
жидкостным охлаждением
Василий Кирсанов
ТК «Связь»
Версия 4
Непосредственный контакт
Отход от стереотипов
Аппетиты растут…
Intel® Xeon® E5-2600 v4 до 18 ядер
3D рендеринг
Кому нужно столько мощщи ?
Моделирование процессов
Волшебный мир кино
Стандартные размеры 600х1200
Инженерный комплекс
Смена парадигмы
Оборудование погружается в
специальную стойку-ванну с
диэ...
модифицировать
серверное
оборудование
Ванна с хладагентом
ИТ-стойка +200-400кг
Как устроено ?
Принципиальная схема (2 контура)
Хладагент циркулирует по системе и отбирает выделяемое ИТ-оборудованием тепло
43°С (а не ...
радиатор + венилятор
Куда девать тепло ? Freecooling – наше всё.
vs
для отведения одинакового кол-ва тепла потребуется разное кол-во времени и энергии
Стакан жидкости vs Кубометр воздуха
Рояль в кустах
1985
Cray-2
№1 до 1990
3M Novec™ vs Полимер
Двойняшки ≠ Близнецы
Свойство Вещество
Название Воздух ОХЛ-14 Novec™ Novec™
Молекулярная формула - - C6F12O C7F14O
Тип Газ (N, O) Смесь полимер...
Такие похожие и такие разные
- Не работает оптика и атмосферные HDD
- Нет отраслевого стандарта
- Не подходит для Collocat...
Что можно охлаждать ?
CPU
GPU
ASIC
HDD Helium
SSD
MB
RAM
PSU
UPS
Сколько тепла можно отвести от стойки ?
Воздух Жидкость
25 кВт
50 кВт
> 100 кВт
5-7 кВт – обычный кондиционер
9-12 кВт – х...
vs
Мораль:
Сравнить надо комплексно:
«железо» + всё окружение
Хотим серверное помещение с нуля. Какие затраты ?
+ купить/пост...
Авантюра. Да. Но технология позволяет…
А что ? Деревянный же ЦОД есть…
Передвижной вычислительный комплекс
Экономим электричество. OPEX
– 10-20%
– 90-95%
почти не требует обслуживания
Что дальше ?
Ведутся работы по
созданию
СХД большого
объёма (от 1 Пб).
снизить себестоимость. увеличить плотность размещен...
Более надёжная работа серверов
- Увеличение срока службы оборудования (нет коррозии)
- Отсутствие пыли
• нет статического ...
4 CPU x86 / 1U
Высокая производительность
- высокая плотность размещения (до 80 ЦПУ/стойку)
- постоянный Turbo Boost
- гет...
Если мало места…
+ отсутствие шума 
При дефиците электричества
Гиперконвергентные системы
Работа в экстремальных условиях
корпус системы действует как клетка Фарадея
(если корпус металлический, а не пластиковый/стеклянный)
Защита от сглаза снят...
Почему все не кинулись «топить» железо ?
(если всё так прекрасно)
неосведомлённость страхистереотипы
Объективные причины
нет больших тепловыделений не загружена существующая
инфраструктура (на воздухе)
Мочить или не мочить ?
c 2012
В Мире уже используют
Изучают и присматриваются
Allied Control
и многие другие…
Смелые заказчики
Вопросы ?
v.kirsanov@tk-svyaz.ru
Благодарю за внимание !
Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)
Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)
Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)
Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)
Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)
Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)
Upcoming SlideShare
Loading in …5
×
Upcoming SlideShare
Genuine web-scale железо. Как FB, Apple и Google разрушают традиции в компьютерном бизнесе и почему это для индустрии хорошо
Next
Download to read offline and view in fullscreen.

1

Share

Download to read offline

Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)

Download to read offline

- Альтернатива традиционному охлаждению или "Стакан жидкости vs Кубометр воздуха".
- Устройство системы охлаждения: подсистема охлаждения узлов + подсистема утилизации тепла.
- Типы оборудования, которые можно охлаждать.
- Преимущества перед традиционными "воздушными" системами + примеры кейсов (суперкомпьютеры, рендер-фермы, биткойн-фермы, гиперконвергентность и пр.).
- Сравнение технологий погружного охлаждения: Novec 1230 vs Полимер/Мин.масло.
- Экономическая эффективность на пальцах.
- Ответы на вопросы.

Related Books

Free with a 30 day trial from Scribd

See all

Cистемы с непосредственным жидкостным охлаждением / Василий Кирсанов (ТК Связь)

  1. 1. Cистемы с непосредственным жидкостным охлаждением Василий Кирсанов ТК «Связь» Версия 4
  2. 2. Непосредственный контакт
  3. 3. Отход от стереотипов
  4. 4. Аппетиты растут… Intel® Xeon® E5-2600 v4 до 18 ядер 3D рендеринг
  5. 5. Кому нужно столько мощщи ?
  6. 6. Моделирование процессов
  7. 7. Волшебный мир кино
  8. 8. Стандартные размеры 600х1200 Инженерный комплекс Смена парадигмы Оборудование погружается в специальную стойку-ванну с диэлектрической (непроводящей) жидкостью.
  9. 9. модифицировать серверное оборудование Ванна с хладагентом ИТ-стойка +200-400кг Как устроено ?
  10. 10. Принципиальная схема (2 контура) Хладагент циркулирует по системе и отбирает выделяемое ИТ-оборудованием тепло 43°С (а не 20-25) (от -50 до +50 °С)
  11. 11. радиатор + венилятор Куда девать тепло ? Freecooling – наше всё.
  12. 12. vs для отведения одинакового кол-ва тепла потребуется разное кол-во времени и энергии Стакан жидкости vs Кубометр воздуха
  13. 13. Рояль в кустах
  14. 14. 1985 Cray-2 №1 до 1990
  15. 15. 3M Novec™ vs Полимер Двойняшки ≠ Близнецы
  16. 16. Свойство Вещество Название Воздух ОХЛ-14 Novec™ Novec™ Молекулярная формула - - C6F12O C7F14O Тип Газ (N, O) Смесь полимеров Фторкетон Фторкетон Температура кипения, °С −195,8 / −182,98 > 130 49 74 Температура замерзания, °С −214 / −218,79 < −70 < -100 < -100 Температура вспышки в открытом тигле , °С нет 160-180 нет нет Температура самовоспламенения пара нет > 300°С нет нет Теплопроводность, Вт/м*К 0,023 0,11-0,13 0,059 ~ 0,06 Удельная теплоемкость, Дж/кг*К 1000 1500-1700 1103 1130 Плотность, кг/м3 1,2 850-950 1600 1670 Физические характеристики хладагента
  17. 17. Такие похожие и такие разные - Не работает оптика и атмосферные HDD - Нет отраслевого стандарта - Не подходит для Collocation 3M Novec™ Полимер - быстрое испарение • чистое оборудование • герметичные стойки • надо доливать • выше теплоотдача - содержит фтористые соединения - дорогой - малоиспаряемый - оставляет плёнку на оборудовании - нетоксичный - высокая текучесть (капиллярный эффект) - может вступать в реакцию… - недорогой
  18. 18. Что можно охлаждать ? CPU GPU ASIC HDD Helium SSD MB RAM PSU UPS
  19. 19. Сколько тепла можно отвести от стойки ? Воздух Жидкость 25 кВт 50 кВт > 100 кВт 5-7 кВт – обычный кондиционер 9-12 кВт – хол./гор. коридор ~ 20 кВт – рядные кондиционеры С каждой итерацией растёт сложность системы и бюджет на инфраструктуру > 50 кВт обычная стойка 600х1200 нестандартный размер
  20. 20. vs
  21. 21. Мораль: Сравнить надо комплексно: «железо» + всё окружение Хотим серверное помещение с нуля. Какие затраты ? + купить/построить/перестроить помещение + подготовка помещения: • фальшпол, • гидроизоляция, • пожаротушение (трубопроводы, газовая система) • система охлаждения / подготовки воздуха • холодный и горячий коридор • воздуховоды, система дымоудаления + само серверное оборудование +СЖО + серверы + порошковое пожаротушение Не нужно специальное помещение Экономика на пальцах. CAPEX
  22. 22. Авантюра. Да. Но технология позволяет…
  23. 23. А что ? Деревянный же ЦОД есть…
  24. 24. Передвижной вычислительный комплекс
  25. 25. Экономим электричество. OPEX – 10-20% – 90-95% почти не требует обслуживания
  26. 26. Что дальше ? Ведутся работы по созданию СХД большого объёма (от 1 Пб). снизить себестоимость. увеличить плотность размещения до 8 CPU / Unit
  27. 27. Более надёжная работа серверов - Увеличение срока службы оборудования (нет коррозии) - Отсутствие пыли • нет статического электричества, исключена вероятность пробоя, • не ухудшается отведение тепла - Из-за отказа от вентиляторов отсутствует риск их поломки (и перегрева) - Постоянная циркуляция хладагента препятствует возникновению локальных точек перегрева - Снижение внутренних вибраций и, как следствие, ошибок чтения/записи жестких дисков
  28. 28. 4 CPU x86 / 1U Высокая производительность - высокая плотность размещения (до 80 ЦПУ/стойку) - постоянный Turbo Boost - гетерогенные системы из CPU + GPU
  29. 29. Если мало места… + отсутствие шума 
  30. 30. При дефиците электричества
  31. 31. Гиперконвергентные системы
  32. 32. Работа в экстремальных условиях
  33. 33. корпус системы действует как клетка Фарадея (если корпус металлический, а не пластиковый/стеклянный) Защита от сглаза снятия на расстоянии
  34. 34. Почему все не кинулись «топить» железо ? (если всё так прекрасно) неосведомлённость страхистереотипы
  35. 35. Объективные причины нет больших тепловыделений не загружена существующая инфраструктура (на воздухе)
  36. 36. Мочить или не мочить ?
  37. 37. c 2012 В Мире уже используют Изучают и присматриваются Allied Control и многие другие…
  38. 38. Смелые заказчики
  39. 39. Вопросы ?
  40. 40. v.kirsanov@tk-svyaz.ru Благодарю за внимание !
  • ssuser33e0ee

    Dec. 2, 2016

- Альтернатива традиционному охлаждению или "Стакан жидкости vs Кубометр воздуха". - Устройство системы охлаждения: подсистема охлаждения узлов + подсистема утилизации тепла. - Типы оборудования, которые можно охлаждать. - Преимущества перед традиционными "воздушными" системами + примеры кейсов (суперкомпьютеры, рендер-фермы, биткойн-фермы, гиперконвергентность и пр.). - Сравнение технологий погружного охлаждения: Novec 1230 vs Полимер/Мин.масло. - Экономическая эффективность на пальцах. - Ответы на вопросы.

Views

Total views

475

On Slideshare

0

From embeds

0

Number of embeds

142

Actions

Downloads

4

Shares

0

Comments

0

Likes

1

×