2011 Pmo Symposium Enhancing The Pmo Partership Finalsremingt
This presentation primarily targets an Enterprise’s business architecture and how this architecture impacts, constrains, supports and guides the work that a PMO will undertake. Business architecture will also help in determining the types of PMO’s which are needed and at what levels they will be needed in order to achieve Enterprise objectives.
2011 Pmo Symposium Enhancing The Pmo Partership Finalsremingt
This presentation primarily targets an Enterprise’s business architecture and how this architecture impacts, constrains, supports and guides the work that a PMO will undertake. Business architecture will also help in determining the types of PMO’s which are needed and at what levels they will be needed in order to achieve Enterprise objectives.
'Van Fans en volgers naar klanten. Social media voor bedrijven'Ellen Van Campenhout
Dit is een initiatie tot social media voor bedrijven. Het belang van de actieve aanwezigheid op social media wordt uitgelicht. Er worden enkele voorbeelden gegeven om de verscheidenheid aan mogelijkheden aan te tonen. Tot slotte richt ik de aandacht op enkele aandachtspunten voor succesvol omgaan met social media.
'Van Fans en volgers naar klanten. Social media voor bedrijven'Ellen Van Campenhout
Dit is een initiatie tot social media voor bedrijven. Het belang van de actieve aanwezigheid op social media wordt uitgelicht. Er worden enkele voorbeelden gegeven om de verscheidenheid aan mogelijkheden aan te tonen. Tot slotte richt ik de aandacht op enkele aandachtspunten voor succesvol omgaan met social media.
Using Open Source technologies to create Enterprise Level Cloud SystemOpenFest team
Using Open Source technologies to create Enterprise Level Cloud System, optimize your costs and offset your carbon footprint on the environment - Венелин Горнишки, Илиян Стоянов
1. Направи си сам СУперкомпютър
Д-р Христо Илиев, НИС при СУ "Св. Климент Охридски"
OpenFest, МТЦ “Интерпред” София, 5–6 ноември 2011 г.
08 ноември 11, вторник
2. За мен
• Физически факултет на СУ
• http://icaci.info
• hristo <при> icaci.info
• @hiliev
• xmpp:icaci@jabber.org
2
08 ноември 11, вторник
3. “All science is either physics or stamp collecting.”
-- Ernest Rutherford
J. B. Bricks, “Rutherford at Manchester” (1962)
08 ноември 11, вторник
4. По-известни физици
• John Atanasoff – доктор по теоретична физика
• John von Neumann – доктор по математика и физика
• Edsger Dijkstra – магистър по физика
• Donald Knuth – бакалавър по физика
• Dennis Ritchie – бакалавър по физика
• Brian Kernighan – бакалавър по инж. физика
• Richard Stallman – бакалавър по физика
4
08 ноември 11, вторник
5. Суперкомпютър
• Голям
• Бърз
• Енергоемък
• Скъп
• Много памет
• Паралелен
5
08 ноември 11, вторник
7. Закон на Мур
• Напасване на експерименталните наблюдения с
показателна функция
(t t0 )/2
• Ntran (t) = Ntran (t0 ) ⇥ 2
(Gordon Moore, CEO Intel, 1975)
(t t0 )/1,5
• OpW(t) = OpW(t0 ) ⇥ 2
(David House, Intel)
• Инженерите на Intel упорито се опитват да
поддържат законите в сила!
7
08 ноември 11, вторник
8. Модел на времето
• Флуидодинамика и термодинамика
• Диференциални уравнения диференчни уравнения
• Симулиран обем = площ S × височина H
• Пространствена разделителна способност ∆L
• Времева стъпка ∆t
• Операции ~ (S×H)/(∆L)3 T/∆t
8
08 ноември 11, вторник
10. HPL
• Стандартен начин да си ги мерим [суперкомпютрите]
• LINPACK тест на J. Dongara – A⋅x = y посредством гаусова
елиминация с частичен избор на водещ елемент
• N := dim(A) = колкото позволява паметта
• HPL – паралелна MPI версия
• BLAS
• 2/3×N3 + 2×N2 DP ops
• Резултат в DP Gflops
10
08 ноември 11, вторник
11. Top500.org
• Списък на 500-те най-бързи суперкомпютри в света
• 2 пъти годишно – юни и ноември
• Rpeak = Nядра × fтакт × R
(R = 4 flops/Hz на повечето съвременни процесори)
• Rmax = максимална производителност според HPL
• Nmax = dim(A) за постигане на Rmax
• Rmax/Rpeak < 1 – паралелна ефективност
11
08 ноември 11, вторник
12. България в Top500
• Blue Gene/P на ДАИТС (сега МТИТС)
• 8192 PowerPC 450 ядра @ 850 MHz
• Rmax = 23,42 Tflops; Rpeak = 27,85 Tflops
• 11.2008 г. – 126 място
• 06.2009 г. – 245 място
• 11.2009 г. – 377 място
• 06.2010 г. – изпада (Rmax[#500] = 24,67 Tflops)
12
08 ноември 11, вторник
13. Системна йерархия
СУРР
ОС и мидълуер
CPU (+ GPU) и памет
Комуникация
13
08 ноември 11, вторник
14. Beowulf
• Thomas Sterling и Donald Becker (NASA, 1994 г.)
• Стандартни компоненти
• Стандартна мрежова среда
• Unix-подобна ОС
• Мидълуер за паралелна обработка: MPI, PVM и др.
• Клъстери, ферми и мрежи от работни станции
14
08 ноември 11, вторник
16. Нива на паралелизъм
• Много груб – SETI@Home, BOINC
• Груб – тривиално паралелни алгоритми
• Среден – MPI, PVM, DSM
• Фин – нишки, OpenMP, GPU
• Много фин – ILP, SIMD, GPU
16
08 ноември 11, вторник
17. Комуникация
• Обмяна на данни между процесорите
• InfiniBand / 10 GbE
• Myrinet
• GigE (само за груб паралелизъм)
• Файлова система и сервизна мрежа
• InfiniBand / GigE
17
08 ноември 11, вторник
18. InfiniBand
• Комутация на пакети (switched fabric)
• Ниска латентност за MPI ~µs
• Висока пропускателна способност
• DDR – 20 Gbps; QDR – 40 Gbps
• Скъпи кабели :)
• OpenFabrics Enterprise Distribution (OFED)
18
08 ноември 11, вторник
19. CPU или GPU?
• Цена и енергоемкост с/у универсалност
• CPU – универсални и енергоемки
• Intel E7-4870: <1 Gflops/W; >20 €/Gflops
• GPU – масивно паралелни и енергоефективни
• AMD/ATI HD6950: >3 Gflops/W; <0,5 €/Gflops
19
08 ноември 11, вторник
20. CPU
• Универсални
• Паралелни и последователни алгоритми
• Голям обем памет на ядро
• Многозадачен режим
• Бавен достъп до RAM
20
08 ноември 11, вторник
21. GPU
• Масивно паралелни SIMD
• Тесен клас силно паралелни по данни алгоритми
• Приставки (ускорители) към CPU
• Малък обем собствена RAM на ядро
• Тясно място – прехвърляне на данни от/до
RAM на CPU
21
08 ноември 11, вторник
22. Програмни модели
• SIMD, ILP – неявна поддръжка чрез кодовия
генератор на компилатора
• Нишки – OpenMP, ОС API, библиотеки
• DSM – ClOMP, vSMP, Unified Parallel C
• GPU – CUDA, CAL, OpenCL, OpenMP подобия
• Предаване на съобщения – MPI, PVM, Charm++
22
08 ноември 11, вторник
23. ОС
• Практически всяка ОС с мрежов стек
• Unix
• UNICOS (Cray)
• IRIX (SGI)
• Solaris (Sun Microsystems)
• Linux (IBM, SGI, Cray, Beowulf)
• Mac OS X
(System X на Virginia Tech, #3 в Top500 от 11.2003 г.)
• Windows 2008 HPC Server (Cray, Bull)
23
08 ноември 11, вторник
24. Мидълуер
• Предаване на съобщения
• Достъп до отдалечена памет
• Глобални операции
• Синхронизация
• Паралелен В/И
• Настройка и профилиране на паралелни приложения
24
08 ноември 11, вторник
25. Open MPI
• Реализация на MPI-1 и MPI-2
• Нов BSD лиценз
• Множество платформи и преносни среди
• Активна разработка
• http://www.open-mpi.org
25
08 ноември 11, вторник
26. Файлова система
• Общ изглед на файловата система посредством
мрежово споделяне
• NFS – лесна за разгръщане, но с лоша
мащабируемост
• Lustre – трудна за разгръщане, но с висока
производителност и мащабируемост
26
08 ноември 11, вторник
27. Lustre
• Високомащабируема паралелна файлова система за
големи клъстерни инсталации
• GPL
• CMU → CFS → Sun → Oracle → Whamcloud
• Сървър за метаданни и множество блокови
хранилища
• Поддръжка на InfiniBand свързаност
27
08 ноември 11, вторник
28. Управление на ресурсите
• Голям брой отделни възли под управление на собствена ОС
(може и на различни ОС)
• Задачи
• Заделяне на ресурси
• Отдалечено стартиране на процеси
• Пренасочване на В/И
• Счетоводство на използваните ресурси
(все някой /трябва да/ плаща)
28
08 ноември 11, вторник
35. СУРР
• TORQUE + Maui Cluster Scheduler
• Open Grid Scheduler
• Simple Linux Utility for Resource Management
(SLURM)
• Condor
35
08 ноември 11, вторник
36. Open Grid Scheduler
• Версия с отворен код на Oracle Grid Engine
• Началник-планировчик – qmaster/scheduler
• Изпълнители и пастири – execd, shepherd
• Набор от програми за мрежово взаимодействие с
главния процес – qsub, qstat, qdel, qconf, qhost
• GUI – qmon
• Политики за честно споделяне на ресурсите
36
08 ноември 11, вторник
37. Поддръжка
• Повече възли ≡ по-сложна поддръжка
• Блейд модули
• Мрежово зареждане на възлите от обща инсталация
• IPMI модули за отдалечена администрация
• Наблюдение на възлите
• xCAT за особено големи инсталации
37
08 ноември 11, вторник
38. Ganglia
• Софтуер с отворен код за наблюдение на
мрежа от компютри
• gmond и gmetad
• Агрегация на историческа информация (rrd)
• Интеграция с gexec за отдалечено изпълнение
• http://ganglia.info/
38
08 ноември 11, вторник
40. PHYSON
• “Розовият” клъстер на СУ
• Роден и отгледан по дог. ВУ-Ф 205/2006,
поддържан по ДО 02-136/2008, ДО
02-167/2008 и ДДВУ 02-42 с НФНИ
• ~ 170 хил. лв. компютри + инфраструктура
• Rpeak = 3,245 Tflops
• Научни пресмятания и обучение
• 13 проекта, 49 потребителя
40
08 ноември 11, вторник