Cloud Computing Och Testning FöR DataföReningen 2010 02 24 Final

Cloud Computingoch TestningDataföreningen– 24 feb – 18.00
Jens Riboe
jens.riboe@ribomation.com
24 Februari 2010

Jens RiboeRibomation
För diverse kunder
KTH
Ribomation
ERA
London
Goyada
Wily (San Francisco)
VzB
OW
RM
SICS
1990
1995
2000
2005
2010

Problem/Prestanda analys

Agenda
Varför
Vad
Hur
Vart
Vem
Vilka
Bakgrundochterminologi
Användningsområden
Molntyper
AWS
Tjänsterförutvecklare
Testningi EC2
Spara frågorna tills efter presentationen

ElasticComputing
Cloud Computing
Software as a Service
Bakgrund och Terminologi

Mellan försäljningstopparna
”Vad använder man sina servrar till när det inte är toppbelastning
såsom Xmas, Valentine’s Day?”— undrade en av världens största detaljhandelskedjor

Detkorta och oglamorösa svaret
Cloud Computing är en ny paradigm fördriftsättningavapplikationer
Användervirtualiseringimassivskala

Cloud Computing = V + C + A + P
Virtualization (Xen)
+ DataCenter (Amazon)
+ PublicAccess (SSH/X.509)
+ PricingModel ($0.08/h)

Software-as-a-Service (SaaS)
Webbaserad tjänst
Snabbt växande affärs område
Har ingen direkt koppling till Cloud Computing
Man kan driva en SaaS tjänst från en skrivbordsdator
Prestanda blir förvisso lidande
Många stora SaaS tjänster drivs från egna servrar
Ordet myntades av SalesForce

Relationen SaaS vs. CC
Consumer
Provider
SaaS
Cloud Computing

XaaS
Det finns många varianter av Something-aaS
Component-as-a-Service
Specialiserade tjänster för webb-applikationer
Platform-as-a-Service
Applikations-exekverings-miljö
Infrastructure-as-a-Service
Virtuella resurser såsom, servrar, hårddiskar, köhanterare, datalagring, IP-adresser

Extra datakraft
Enkel driftsättning
Skalbara applikationer
Stora databehandlingar

(1) Extra datakraft
Projekt servrar
Test servrar
Last generatorer
. . .
Slit & släng åldern för servrar

(2) Enkel driftsättning
Vad behöver man en driftsättningsavdelning till, när man kan sköta jobbet självt med några klick?
5 min

(3) Skalbara applikationer
Exempel: animoto.com
1
Från 10 till 3500 servrar på en vecka
2
3
Users:
Monday: 25K Users
Tuesday: 50K Users
Wednesday: 100K Users
Thursday: 250K Users
Platform:
EC2
SQS
S3
RightScale
Ruby on Rails

(4) Stora data behandlingar
Batch körningar
Analys av transaktionsloggar
Stora konverteringsarbeten
Används av
Google
Yahoo
LastFM
Facebook
. . .
Källor: http://www.slideshare.net/acarlos1000/hadoop-basics-presentation/28
http://open.blogs.nytimes.com/2007/11/01/self-service-prorated-super-computing-fun/

Infrastruktursmoln
Applikationsmoln
Databehandlingsmoln
Molntyper

Infrastruktursmoln
Hosting, men i massiv skala
Fokus på servrar och datalagring
Elasticcomputing – virtuella servrar
Elasticstorage – virtuella hårddiskar
Lagringstjänster – SAN
Kö-tjänster – job/taskqueue
Statiska IP adresser

Några aktörer
Amazon Web Services (AWS)
Först, störst och bäst
Hosting företag
myCityCloud
Rackspace
GoGrid
…

Eget privat moln
Eucaluptus
Open source version av AWS
API kompatibelt med ECS/EBS/S3
Standard iUbuntu Server 9.x
Enomaly
Det system som AWS själva kör

Applikationsmoln
Distribuerad plattform för applikationer
Google App Engine (GAE)
Java/Python, BigTable
SalesforceForce.com
Eget scriptspråk, Oracle, enterprisegrade
Windows Azure
.NET

Databehandlingsmoln
Storskalig extraktion/aggregering av information
Apache/Yahoo Hadoop
Exekvering över 100-tals noder
Yahoo har ett Hadoop kluster på 20000+ noder
Java open-sourceimplementation
HDFS (idé från Google FileSystem GFS)
MapReduce (idé från Google map-reduce)
Hive (idé från Google BigTable)

Det ”mänskliga” molnet
Många människor som utför repetitiva uppgifter
Den mekaniska turken (Automaton Chess Player) [1770-1854] lanserades som en schackspelande maskin.
Emellertid, så satt det faktiskt en människa inuti, som utförde schackdragen.

AWS – Amazon Web Services

EC2 / EBS / S3 / AMI / EIA / SQS
DNS
EC2
SQS
put
get
EBS
SAN
static IP
SDB
HTTP
80
EIA
AMI
S3
HTTP
RDB
MySQL
Security Group
SSH & RDP
22 & 3389
Inget är åtkomligt om man inte först öppnar en port i brandväggen.

EC2 Instance Types
One EC2 Compute Unit (ECU) provides the equivalent CPU capacity
of a 1.0-1.2 GHz 2007 Opteron or 2007 Xeon processor.

Operativ System
Många färdiga konfigurationer
Det går att med lite Linux händighet bygga en AMI från en tom diskblock fil

Global driftsättning
En region består av en eller flera zoner
US-East (North Virginia)
US-West (North California)
EU (Ireland)
ASIA (Singapore) - planned
En zone utgör ett logiskt data center
Ett logiskt data center är resursmässigt helt fristående
EU
Regions
US

Priser

AWS Ekonomi
As you go
USD 0,085/h (EC2 Small)
ReservedInstance
USD 0,03/h + 227/yr
USD 0,03/h + 350/3yr
Spot
Bidding

CloudWatch
Övervakningav EC2 servrar

Auto-Scaling
Automatisk uppstartning och nedtagning av servrar beroende på aktuell last
Bygger på CloudWatch

Load Balancing
Automatisk fördelning av last över olika
Servrar
Zoner
Regioner

CloudFront
World-wide distributed cache for static content
Caching av statisk data i S3
S3

AWS EC2

Exempel på utvecklartjänster

Versionshantering++
Hantering av källkod
Versionshantering
Tickets
Milestones
Wiki
Blog
RSS
. . .

Component-as-a-Service
Specialiserade SaaS tjänster för webb applikations utveckling

Test @ EC2
Driftsätt målsystemet temporärt i molnet
Använd en lastgenereringstjänst
Används en prestanda-monitorerings-tjänst
Terminera servrarna och iterera
Nästa konfigureringsuppsättning
Kan köra godtyckligt många testsviter parallellt

Lasttestningstjänster
Generering av massiv trafik
Geografiskt spridd

Monitoreringstjänster
Produktionsövervakning
De som erbjuder lasttestning har även övervakning
Men det finns också specialister
Många open-sourcetools, för egen drift i EC2
Munin, Cacti, Nagios, Ganglia, …

LoadStorm
Lätt att komma igång
Gratis för ”funktionstest”
Två olika prismodeller
Per månad
Per test

Testning med LoadStorm

Arkitektur
Påverkan
Förändring
Utvecklingen

Arkitektur
I stället för några få men sofistikerade och dyra servrar
Har man ett stort antal små men enkla och billiga servrar
Fördelar
Skalbarhet
Feltolerans
Flexibilitet
Billigare

Påverkar
Design avnyaapplikationer
Skalbaraochfeltoleranta från början
Val av open-source
Löser licensfrågan
Testningavdessaapplikationer
Meromfattandetestningpåkortaretid
Driftsättningavdessaapplikationer
Enklareochlättareattprova sig framochförändra

Förändrar
Drift avdelningen
Kan rullautnykonfigpå en timme
Programmeringsavdelningen
Kan skapa en mashuppå en timme
Test avdelningen
Kan körahelatestsvitenpå en timme
Affärsdrivandeavdelningar
Kan draigångegetprojektpå en timme

Sammanfattning

Fördelar med Cloud Computing
Tekniska fördelar
Capacity on demand
Scale Up & Scale Down
Fault Tolerant
Simple Architecture
Ekonomiska fördelar
No Up-Front Capital Investment
Pay as you go
Start Small & Pay as You Grow

I korthet
Extra servrar
Bekväm driftsättning
Skalbara applikationer
Stora databehandlingar
Molntyper
Infrastruktur
Applikation
Databehandling
Förändrar
Applikationer
Ekonomi
Organisationer
Termer
ElasticComputing
CloudComputing
Software-as-a-Service
Component-aaS
Infrastructure-aaS
Platform-aaS

Frågor
Jens Riboe
+46 (0)730-314040
jens.riboe@ribomation.com
www.ribomation.com
blog.ribomation.com

http://blog.ribomation.com	15
http://www.ribomation.com	14
http://www.slideshare.net	2
http://anonymouse.org	1

Cloud Computing Och Testning FöR DataföReningen 2010 02 24 Final

by Ribomation on Feb 24, 2010

Accessibility

Categories

Tags

Upload Details

Usage Rights

4 Embeds 32

Statistics

Cloud Computing Och Testning FöR DataföReningen 2010 02 24 Final — Presentation Transcript