[IBM 서버] POWER9

Power Systems 제품소개
- POWER9

Welcome to the Waitless World - 2 -
Scale Up 모델
Power S914
Power S922
Power H922
Power L922
Power S924
Power H924
Power
LC922
Power E980
Power LC922
▪ 최대 16소켓
▪ 최대 192코어
▪ 최대 64TB 메모리
▪ 최대 4소켓
▪ 최대 48코어
▪ 최대 2소켓
▪ 최대 24코어
▪ 최대 2소켓
▪ 최대 20코어
▪ 최대 4TB 메모리▪ 최대 1소켓
▪ 최대 8코어
New
New
Power AC922 A
AI Solution
PowerAI
PowerAI Vision
Scale Out 모델
Power E950
POWER9 System Line up

Welcome to the Waitless World
POWER9 Portfolio
AC922(Newell)
8335-GTG
L922
9008-22L
S922
9009-22A
S914
9009-41A
S924
9009-42A
H922
9223-22H
H924
9223-42H
• 2소켓, 2U
• 16, 20코어/소켓
• 4/6 Volta GPU
• 512GB SMP
Memory(32GB DDR4)
• 64/96GB GPU
Memory
• 1.6TB NVMe adapter
• 2 SFF SATA:
HDD(Max 4TB);
SSD(Max 3.84TB)
• PCIe GEN4/CAPI 2.0
• RHEL 7.4
• Ubuntu(2분기 출시)
• 1,2-소켓, 2U
• 8,10,12 코어/ 소켓
• 32 IS RDIMM 슬롯
• 4TB 메모리
• 4 CAPI 2.0 슬롯
• Linux only
• PowerVM
• KVM (GA2)
• 1,2-소켓, 2U
• 4, 8,10 코어/소켓
• 4TB 메모리
• AIX, IBM i, & Linux
• PowerVM
• 1-소켓, 4U & 타워형
• 4,6,8 코어/소켓
• 1TB 메모리
• 내장 RDX 미디어
• AIX, IBM i, Linux
• PowerVM
• 2-소켓, 4U
• 8,10,12 코어/소켓
• 4TB 메모리
• AIX, IBM i, Linux
• PowerVM
• 1,2-소켓, 2U
• 4, 8,10 코어/소켓
• 4TB 메모리
• AIX, IBM i
up to 25%
• Linux
• PowerVM
• 2-소켓, 4U
• 8,10,12 코어/소켓
• 4TB 메모리
• AIX, IBM i
up to 25%
• Linux
• PowerVM
POWER9의
차별화된 기술
• 내장형 PowerVM (PowerVM을 통한 클라우드 가상활 솔루션)
• 2개 소켓 4TB까지 구성 가능 – DDR4 Industry Standard memory RDIMMs
• 고속의 25Gb/s 외장 포트– 하나의 소켓당 1개의 포트
• 2개의 내장 NVMe Flash boot 어뎁터
• 내장된 분석 및 알고리즘을 통해 최적화된 클럭 스피드로 POWER9 실행 가능
3

POWER9 System 사양
SCO Enterprise Enterprise
제품
S914 S922 S924 L922 E950 E980
모델명 9009-41A 9009-22A 9009-42A 9008-22L 9040-MR9 9080-M9S
시스템 패키지 19" rack drawer (4U) & Tower 19" rack drawer (2U) 19" rack drawer (4U) 19" rack drawer (2U) 19" rack drawer (4U)
19" rack drawer (7U/12U/22U)
5U system nodes(4) &
2U system control unit
프로세서 옵션
클럭스피드-GHz (코어/소켓) |
코어수
2.3~3.9 GHz (1) | 4
2.3~3.9 GHz (1) | 6
2.8~3.8 GHz (1) l 8
2.8~3.8 GHz (1) | 4
3.4~3.9 GHz (1) | 6
2.9~3.8 GHz (1) l 8
3.8~4.0 GHz (2) | 8
3.5~3.9 GHz (2) | 10
3.4~3.9 GHz (2) l 12
3.4~3.9 GHz (2) | 8
2.9~3.8 GHz (2) | 10
2.7~3.8 GHz (2) l 12
3.6~3.8GHz (4) | 8
3.4~3.8 GHz (4) | 10
3.2~3.8GHz (4) | 11
3.15~3.8 GHz (4) l 12
3.9~4.0GHz (4) | 8
3.7~3.9 GHz (4) | 10
3.58~3.9GHz (4) | 11
3.5~3.9 GHz (4) l 12
서버 당 소켓 수 1 1,2 1,2 1,2 2,4 4,8,12,16
최소 - 최대 메모리 2x16GB - 1024GB 2x16GB/CPU- 4096GB 2x16GB/CPU - 4096GB 2x16GB/CPU - 4096GB
128GB(Min)
16TB(Max)
256GB(Min)
64TB(Max)
스토리지 구성-Split Disk
(선택사항)
EJ1C + EJ1E
-Backplane 6 + 6 SFF drive
bays
-RDX Bay
EJ1F + EJ1H
-Bakplane: 4+4 SFF drive Bays
EJ1C + EJ1E
-Backplane 6 + 6 SFF drive
bays
-RDX Bay
EJ1F + EJ1H
#EJ0B, #EJBB, #EJSB
- 4 NVMe 2.5 inch Bays
#EC5J
- 노드당 4 NVMe 2.5 inch Bays
(최대 16)
PCIe Gen 타입 및 슬롯 수
8 PCIe Gen3/Gen4 slots, Full
Height, Half Length :
2 PCIe GEN4 slots (CAPI
enabled)
6 PCIe GEN3 slots (1 reserved
for Ethernet adapter)
9 PCIe Gen3/Gen4 slots, Low
Profile (2소켓) :
5 PCIe GEN4 slots (4 CAPI
enabled)
Height, Half Length (2소켓) :
enabled)
9 PCIe Gen3/Gen4 slots, Low
Profile (2소켓) :
enabled)
Height (4소켓):
2 PCIe GEN4 x16 slots / Socket
2 PCI3 GEN4 x8 slots
for Ethernet adapter - 2port
10Gb LAN)
노드당 8 PCIe Gen4 x16
(최대 32)
최대 PCIe Gen3 I/O Drawer 수 1/2 drawer max 1 drawer max 1.5 drawer max 1 drawer max 4 drawer max 노드당 4 drawer (최대 16)
최대 EXP12SX/EXP24SX
storage drawer 수
28 28 28 28 64 168
Capacity on Demand N/A N/A N/A N/A Y Y
파일 시스템 Spectrum Scale Spectrum Scale Spectrum Scale Spectrum Scale Spectrum Scale Spectrum Scale
컴파일러(complier) C/C++ C/C++ C/C++ C/C++ C/C++ C/C++
OS 지원 AIX, IBM i, Linux AIX, IBM i, Linux AIX, IBM i, Linux Linux AIX, Linux AIX, IBM i, Linux
AIX 레벨 7.1, 7.2 7.1, 7.2 7.1, 7.2 N/A 7.1, 7.2 7.1, 7.2
Linux 지원 Redhat, SUSE, Ubuntu Redhat, SUSE, Ubuntu Redhat, SUSE, Ubuntu Redhat, SUSE, Ubuntu Redhat, SUSE, Ubuntu Redhat, SUSE, Ubuntu
Server Install CSU CSU CSU CSU CSU
Warranty(server only) 24 x 7 / 3 year 24 x 7 / 3 year 24 x 7 / 3 year 24 x 7 / 3 year 24 x 7 / 3 year 24 x 7 / 3 year

4) Security
Proven
2) Technology
Leadership
3) Cloud Ready1)Performance
5
POWER9 특징
POWER8 대비
1.5배의 성능
4TB, PCIe Gen4,
NVMe 제공
PowerVM 자동 탑재 보안패치 적용
5

고객의 과제
시스템 성능의 극대화
&
SAP HANA의 활용
AI와 Cognitive의 연계
안정성, 신뢰성
비즈니스의 혜택
POWER9은 POWER8대비 1.5배의
성능을 제공하며 4TB Memory로
SAP HANA 제안에
최적화된 모델입니다.
System i의 DB2와 Watson은
Seamless하게 연결됩니다.
2004년의 POWER5 부터 현재까지
안정적인 로드맵을 제시하며 경쟁사
보다 긴 제품 Lifecycle을 제공합니다.
가치
업계를 선두하는 기술과
미래 지향적 인프라를 제공합니다
클라우드 전략을 구현하기 위한
이상적인 발판을 제공합니다
미션 크리티컬 업무를 위한
데이터의 보안과,
안정적인 인프라를 제공합니다
Built-in 된 PowerVM 가상화 기능을 통해 차세대 IBM POWER9 기반 Power Systems 서버는 클라우드
환경에 적합하므로 올바른 클라우드 환경을 구축하려는 조직의 요구 사항을 충족 합니다.
POWER9 특징
6

2004
▪ Dual Core
▪ Enhanced Scaling
▪ SMT 2
▪ Distributed Switch +
▪ Core Parallelism +
▪ FP Performance +
▪ Memory bandwidth +
▪ Virtualization
▪ Transistors 276M
2007
▪ Dual Core
▪ High Frequencies
▪ Virtualization +
▪ Memory Subsystem +
▪ Altivec
▪ Instruction Retry
▪ Dynamic Energy Mgmt
▪ SMT 2+
▪ Protection Keys
▪ Transistors 790M
2010 2012
▪ Multi Core (up to 8)
▪ On-Chip eDRAM (L3)
▪ Power Optimized Cores
▪ Mem Subsystem ++
▪ SMT 4
▪ Reliability +
▪ VSM & VSX (AltiVec)
▪ Protection Keys+
▪ Transistors 1.2B
▪ POWER7+ 2.1B
▪ Multi Core (up to 12)
▪ Double L1 data cache
▪ On Chip eDRAM (L3)
▪ L4 on Memory cCards
▪ Bandwidth +++
▪ SMT 8
▪ Reliability ++
▪ On Chip Power Mgmt
▪ PCIe Gen 3
▪ Transistors 4B+
POWER6
65 nm
3-5GHz
POWER7
45 nm
3-4+GHz
POWER8
22 nm
3-4+ GHz
POWER5+
90 nm
POWER7+
32 nmPOWER6+
65 nm
2014 2016
POWER9
14nm
▪ Enhanced Thread
performance
▪ Analytics Optimization
▪ Extreme Big Data
Optimization
▪ Next Gen Memory
▪ On-chip accelerators
▪ Open CAPI
▪ BW enhancements
▪ Transistors 8B
2017 2020-2022
POWER10
POWER5
130 nm
1.5~2.3GHz
POWER9 Processor Roadmap
7

✓ 최대 확장성을 위해 최대 4배 증가된 CPU 대역폭
✓ POWER8보다 향상된 메모리 용량
✓ IS DIMM을 활용하여 2소켓 및 4소켓 공간에서 보다
경쟁력있는 제품 제공
✓ PCIe GEN4 슬롯 및 향후 PCIe GEN4 확장 드로어를
통한 I/O 대역폭 증가
✓ 고속 GPU/오픈CAPI 가속을 위한 25Gb/s 포트
✓ 향상된 스토리지 기능
▪ 2018년 12Gb SAS 기술 지원
▪ 통합 NVMe 플래시 지원
✓ 외장 DVD
POWER9 시스템의 주요 특장점
8

✓ 1-소켓, 4U 랙 & 타워
✓ 4,6,8 코어, 1 소켓
✓ 16 IS RDIMM 슬롯
✓ 1TB 메모리
✓ 2 CAPI 2.0 슬롯
✓ 내장 RDX 미디어
✓ AIX, IBM i, Linux
✓ PowerVM
Power S914
9

12 SFF bays & 1 RDX bay,
or 18 SFF bays
2 PCIe Gen4 slots
6 PCIe Gen3 slots
16 DDR4
RDIMM’s
1 Processor
module
2 Internal
Storage
slots
4 Blowers LCD Display
USB 3.0
10
Power S914

✓ 1,2-소켓, 2U
✓ 4, 8,10 코어/소켓
✓ 4TB 메모리
✓ AIX, IBM i, & Linux
✓ PowerVM
11
Power S922 / Power H922

Power L922
✓ 1,2-소켓, 2U
✓ 8,10,12 코어/소켓
✓ 4TB 메모리
✓ Linux
✓ PowerVM
12

Power S922 / H922 / L922
5 PCIe Gen4 slots
4 PCIe Gen3 slots
16 DDR4 RDIMM’s per
processor
32 DDR4 RDIMM’s total
2 Processor
modules
2 Internal Storage
Controller slots
6 Front SFF
bays
2 Internal SFF
bays
4 Blowers
LCD
Display
USB 3.0
13

✓ 2-소켓, 4U
✓ 8,10,12 코어/소켓
✓ 4TB 메모리
✓ 내장 RDX 미디어
✓ AIX, IBM i, Linux
✓ PowerVM
14

5 PCIe Gen4 slots
6 PCIe Gen3 slots
16 DDR4 RDIMM’s per
processor
32 DDR4 RDIMM’s total
2 Processor
modules
2 Internal
Storage slots
12 SFF bays &
1 RDX bay, or
18 SFF bays
6 Blowers LCD Display
USB 3.0
15

특징 Power E950 Power E980
프로세서 POWER9 (SCM) POWER9 (SCM)
소켓 2 ~ 4 4, 8, 12, 16
코어 & 성능 (SMT8)
3.6-3.8GHz 32core (rPerf 870.4)
3.4-3.8GHz 40core (rPerf 1034.1)
3.2-3.8GHz 44core (rPerf 1071.9)
3.15-3.8GHz 48core (rPerf 1146.4)
3.9-4.0GHz 128core (rPerf 3639.9)
3.7-3.9GHz 160core (rPerf 4392.4)
3.58-3.9GHz 176core (rPerf 4725.8)
3.55-3.9GHz 192core (rPerf 5080.7)
캐시
L2 : 512KB per core
L3 : 10MB per core
L4 : 128MB per socket
L2 : 512KB per core
L3 : 10MB per core
L4 : 128MB per socket
최대 메모리 용량 16 TB 64TB
DIMM Type/DIMM 슬롯 개수 Up to 128 Industry Standard DIMMs
Up to 32 CDIMM / drawer
Up to 128 CDIMM (4-node)
DIMM 단위 용량 8, 16, 32, 64, 128GB DDR4 32, 64, 128, 256, 512 GB DDR4
메모리 대역폭 920 GB/sec 920 GB/sec / drawer
IO 확장 슬롯 Yes Yes
PCIe 슬롯 수 10x PCIe Gen4, 1x PCI Gen3 8 PCIe GEN4 slots / drawer
가속기 포트 Yes (CAPI 2.0 + OpenCAPI) Yes (CAPI 2.0 + OpenCAPI)
PCIe 핫 플러그 지원 Yes + Blindswap Yes + Blindswap
IO 대역폭 630 GB/sec (Gen4) 630 GB/sec (Gen4)
내장 스토리지 베이 12 (8x 2.5” SAS bays + 4x NVMe bays) 4 NVMe 베이 / 드로어
Power E950/E980

Power E950/E980
특징 Power E950 Power E980
프로세서 소켓 2 4
Core activation 8 / 10 / 11 / 12 (1 socket 분량) 8 / 10 / 11 / 12 (1 socket 분량)
Memory 128 GB 512 GB

항목 사양
POWER9 processor
(2.6GHz 16-core or
2.0GHz 20-core)
2
Disk bay (SSD or HDD) 2
Max memory 최대 1024 GB
PCIe slots (Gen4) 4
OS
Redhat 7.4
Ubuntu 16.04.4
GPU (V100 w/ NVLink 2.0) 4 (SXM2)
Total Power Supply AC input (W) 2200 W * 2
Form Factor 2U
Physical dimension
444.5 mm * 88.9 mm
* 850.9 mm
Weight 최대 30kg
POWER9 AC922(8335-GTG) “Newell”
✓ IBM 차세대 GPU 서버 AC922 “Newell”
✓ POWER9과 Volta를 NVLink 2.0을 통해
150GB/s로 연결, PCIe Gen4 탑재
✓ IBM POWER9 CPU와 NVIDIA V100 GPU의 조합
▪ 최신 Volta 아키텍처의 V100 4장 장착
▪ 양방향 75+75GB/sec의 대역폭을 가지는 NVLink
2.0을 통해 GPU-GPU는 물론, CPU-GPU도 연결
▪ 물리적 core 1개당 4개의 HW thread (SMT-4)를
가지는 POWER9 프로레서
▪ 2U 공간 안에 강력한 GPU 컴퓨팅 파워를
압축하여 성능 대비 상면적 및 전력 소비량에서
월등한 이점
18

Power 9 Processor (2x)
• 18, 22C water cooled
• 16, 20C air cooled
PCIe slot (4x)
• Gen4 PCIe
• 2, x16 HHHL
Adapter
• 1, Shared slot
• 1 x8 HHHL Adapter
Memory DIMM’s (16x)
• 8 DDR4 IS DIMMs per socket
NVidia Volta GPU
• 3 per socket (for water-cooled )
• SXM2 form factor
• 300W
• NVLink 2.0
• Air/Water Cooled
Power Supplies (2x)
• 2200W
• 200VAC, 277VAC,
400VDC input
Cooling Fans
• Counter- Rotating
• Hot swap
• 80mm shown
Operator Interface
• 1 USB 3.0
• Green, Amber, Blue LED’s
• Optional 2x SFF SATA Disk
• Optional 2x SFF SATA SSD
• Disk are tray based for hot swap
BMC Card
• IPMI
• 1 Gb Ethernet
• VGA
• 1 USB 3.0
Power AC922 – 딥러닝 전용 GPU 서버
19

POWER9 AC922 특장점 1. NVLink 2.0
• POWER9에서만 제공하는 150GB/s 대역폭의 차세대 NVLink 2.0 기술
• 새로 출시되는 POWER9 + Volta GPU(V100)은 기존 80GB/s NVLink보다 향상된 150GB/s의 CPU-GPU, GPU-GPU 간
통신 대역폭을 제공하여, Training의 수행 시간을 단축시킬 수 있습니다.
차세대 POWER9 + Volta GPU 서버
NVLink 2.0
NVLink 1.0 (Minsky)
✓ NVLink 2.0 링크 당 25GB/s
✓ 최대 6개 링크 연결 (150GB/s, 공랭식 기준)
✓ Cache Coherence 지원
POWER9
GPUGPU
75+75 GB/s
NVLink 2.0
20

POWER9 AC922 특장점 1. NVLink 2.0
• PCPU-GPU, GPU-GPU 간 최대 150GB/s 대역폭을 제공하는 NVLink 기술
• NVLink는 PCIe 타입 대비 4.6배의 대용량 대역폭을 통해 Peer-to-Peer 통신을 최적화합니다.
• CPU와 GPU간은 PCIe로 연결 (32GB/sec)
• 4개 GPU끼리 NVLink * 1 link (50GB/sec), 또는 2
link로 2개씩 연결 (100GB/sec)
• 다른 socket의 GPU 4개와의 연결은 2-hop 구조
4GPU 구성에서,
• CPU와 GPU간을 NVLink * 2 link로 연결 (150GB/sec)
• 2개 GPU끼리 NVLink * 2 link로 연결 (150GB/sec)
6GPU 구성 시, CPU-GPU, GPU-GPU 구간 별 (100GB/sec)
DGX-V1 AC922 (Newell)
32 GB/s
50 GB/s
100 GB/s
32 GB/s POWER9
GPUGPU
150 GB/s
NVLink
POWER9
GPUGPU
150 GB/s
NVLink
21

POWER9 AC922 특장점 2. LMS and Cache Coherence
• GPU 메모리 용량의 한계를 극복하는 Large Memory Support (LMS)
• GPU 메모리 용량은 16GB 이지만, LMS로 최대 1TB의 시스템 메모리(서버 당)를 사용합니다.
DGX-V1 AC922 (Newell)
Xeon CPU
P100
GPU
GPU
mem
POWER9
CPU
RAM
V100
GPU
GPU
mem
Images
models
Images
작은 대역폭
PCIe 32GB/s
RAM
Images
Images
Images
PCIe를 통해 모델과 이미지를
먼저 GPU mem으로 복사한
후에야 GPU가 GPU mem에 접근
(PCIe 병목)
넓은 대역폭
NVLink 150GB/s (4GPU)
Cache
▪ 작은 모델, 작은 이미지, 작은 Batch size
▪ 성능 저하, Training이 불가능한 상황 발생
NVLink를 통해 GPU가 서버
RAM의 모델과 이미지에 직접 접근
(GPU mem은 cache 역할)
▪ 큰 모델, 큰 이미지, *24배 더 큰 Batch size
▪ CPU-GPU간 연결이 NVLink이기 때문에 가능
(*최대 1TB 서버 RAM 메모리 사용)
1
2
22

POWER9 AC922 특장점 3. 2 종류 타입
• 4개 GPU – 수냉식(Water Cooled) , 공냉식(Air Cooled)
• 6개 GPU – 수냉식(Water Cooled)
• 4개 GPU까지 구성 가능, 공냉식/수냉식 옵션
• 150GB/s CPU-GPU간 대역폭
• 6개 GPU까지 구성 가능, 수냉식
• 100 GB/s CPU-GPU간 대역폭
Air/Water Cooled Water Cooled
23

POWER9 POWER8
Form Factor
2U / 4U 2U / 4U
Rack & Tower Rack & Tower
CPU
2U - 190W / 225W 2U - 190W / 225W
4U - 225W / 300W 4U – 225W / 260W
12 cores (SMT8) or 24 cores (SMT4) 12 cores (SMT8)
74 GB/s - Fabric BW 38.4 GB/s - Fabric BW
Memory
4TB 2TB
170 GB/s socket 192 GB/s socket
IS RDIMMs CDIMMs
I/O
PCIe – GEN3/4 PCIe GEN3 (48 lanes)
80 GB/s peak BW 48GB/s peak BW
Max total 26 PCIe Slots (Server + Drawers) Max total 31 PCIe Slots (Server + Drawers)
4 CAPI Slots (one x8 and 3 x16) 4 CAPI Slots (x16)
2U – 8 SFF Bays 2U – 12 / 8 SFF Bays
4U – 12 / 18 SFF Bays 4U – 12 / 18 SFF Bays
4 internal NVMe M.2 boot devices Not available
6Gb SAS 6Gb SAS
RAS
2U – Single & Dual RAID Write Cache 2U - Dual RAID Write Cache
4U – Dual Raid Write Cache 4U - Dual RAID Write Cache
1. Processor 비교 – POWER8 VS POWER9
POWER9 제품 특징
24

P9 Enablement SP
AIX 주요 업데이트
• AIX 보안: Malware 침입 방지 및 강력한 인증을 위한
PowerSC 및 PowerSC MFA 업데이트
• RDMA로 공유 메모리 통신을 통한 새로운 작업 부하
가속화
• 가용성: AIX 라이브 업데이트 향상; GDR 1.2;
PowerHA 7.2
• 클라우드 관리: SDI용 IBM Cloud PowerVC Manager
• POWER9에 대한 AIX 7.2 기본 지원- 예) NVMe 사용
IBM i 주요 업데이트
• POWER9 개발
• 보안 기능의 확장 - IBM i의 TLS기능, 보안 API,
SIEM 솔루션 로그
• 확장된 설치 옵션 – USB 3.0 미디어를 사용한 설치
프로세스
• 클라우드 저장소 암호화 및 압축
• 개발자 및 관리자의 생산성 증대
IBM i 7.3 TR4 &
IBM i 7.2 TR8
2. AIX/IBM i 로드맵
25

7.4 16.04.4 12SP3
AIX
5.3
AIX
6.1
AIX
7.1
AIX
7.2
IBM i
7.1
IBM i
7.2
IBM i
7.3
POWER9
✓ ✓ ✓ ✓ ✓ ✓ ✓ ✓
POWER9 (Newell)
AC922 ✓ ✓
POWER8
✓ ✓ ✓ ✓ ✓ ✓ ✓ ✓ ✓ ✓
* * ** *
* POWER8 compatible mode
** POWER7 compatible mode
 기타 지원 software stack
• Firmware level FW910
• HMC code level V9R1.910
• VIOS 2.2.4 이상
3. OS 지원
26

구분 지원 상세 version
AIX
AIX 7.2 TL02 SP02 or later
AIX 6.1 TL09 SP11 or later (AIX 6.1 service extension required)
AIX with VIOS
AIX 6.1 TL09 SP06 or later (AIX 6.1 service extension required)
VIOS VIOS 2.2.6.21, or later
LINUX
Red Hat Enterprise Linux 7 for Power LE, version 7.4, or later (Power8-mode)
SUSE Linux Enterprise Server 12 Service Pack 3, or later
Ubuntu Server 16.04.4, or later (Power8-mode)
3. OS 지원 상세 version
27

[IBM 서버] POWER9

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to [IBM 서버] POWER9

Similar to [IBM 서버] POWER9 (20)

More from (Joe), Sanghun Kim

More from (Joe), Sanghun Kim (10)

[IBM 서버] POWER9