SlideShare a Scribd company logo
1 of 11
Download to read offline
*

    Sascha Dittmann
    Software Developer / Solution Architect
    Twitter: @SaschaDittmann
    Blog:    http://www.sascha-dittmann.de
* Seit über 13 Jahren:
  * Software Developer
  * Solution Architect

* Seit über 7 Jahren:
  * Trainer für technische Trainings
  * Sprecher auf Konferenzen
  * IT Consulting


                 *
180.000.000.000.000.000.000



1.800.000.000.000.000.000.000



 *
180.000.000.000.000.000.000
    = 0,18 ZB (Zettabytes) - Stand 2006


    1.800.000.000.000.000.000.000
     = 1,8 ZB (Zettabytes) - Stand 2011



*
                      Quelle: IDC – Analyze the Future
Vertikale Skalierung       Horizontale Skalierung


                       *
Atomicy         Basically
Consistecy      Available
Isolation       Soft State
Durabilty       Eventually Consistent

            *
*
DataNode       DataNode   DataNode
                                     0067011990999991950051507004+68750
                                     0043011990999991950051512004+68750
                                     0043011990999991950051518004+68750
                                     0043012650999991949032412004+62300
                                     0043012650999991949032418004+62300




                                     1949,0
                                                            1952,-11
  Map            Map        Map      1950,22
                                     1950,55
                                                            1950,33




  Sort           Sort       Sort     1949,0
                                     1950,[22,33,55]
 Shuffle        Shuffle    Shuffle   1952,-11




                Reduce
                                     1949,0
                                     1950,55
                                     1952,-11




           *
DataNode       DataNode   DataNode
                                     0067011990999991950051507004+68750
                                     0043011990999991950051512004+68750
                                     0043011990999991950051518004+68750
                                     0043012650999991949032412004+62300
                                     0043012650999991949032418004+62300




                                     1949,0
                                                            1952,-11
  Map            Map        Map      1950,22
                                     1950,55
                                                            1950,33




                                     1949,0                 1952,-11
Combine        Combine    Combine    1950,55                1950,33




  Sort           Sort       Sort     1949,0
                                     1950,[33,55]
 Shuffle        Shuffle    Shuffle   1952,-11




                Reduce
                                     1949,0
                                     1950,55
                                     1952,-11




           *
RDBMS                  Map/Reduce
Datenmenge                Gigabytes              Petabytes
Zugriff                   Interaktiv und Batch   Batch
Lese- / Schreibzugriffe   Viele Lese- und        Einmaliges Schreiben
                          Schreibzugriffe        Viele Lesezugriffe
Datenstruktur             Statisches Schema      Dynamisches Schema
Datenintegrität           Hoch                   Niedrig
Skalierverhalten          Nicht-Linear           Linear




                          *
*

More Related Content

Viewers also liked

Como se trabaja matemáticas con estudiantes con un
Como se trabaja matemáticas con estudiantes con unComo se trabaja matemáticas con estudiantes con un
Como se trabaja matemáticas con estudiantes con unadriloaiza
 
Goldmedia Interaktions-Index Februar_2013_Deutsche Fluggesellschaften
Goldmedia Interaktions-Index Februar_2013_Deutsche FluggesellschaftenGoldmedia Interaktions-Index Februar_2013_Deutsche Fluggesellschaften
Goldmedia Interaktions-Index Februar_2013_Deutsche FluggesellschaftenGoldmedia Group
 
Fairy tail_378
Fairy tail_378Fairy tail_378
Fairy tail_378Shonenmax
 
Goldmedia Aufmerksamkeits-Index
Goldmedia Aufmerksamkeits-IndexGoldmedia Aufmerksamkeits-Index
Goldmedia Aufmerksamkeits-IndexGoldmedia Group
 
Manual Básico de flash 8
Manual Básico de flash 8Manual Básico de flash 8
Manual Básico de flash 8liizethAzuara
 
Entrenamiento de perros
Entrenamiento de perrosEntrenamiento de perros
Entrenamiento de perrosarielech21
 
Autogestion diegorosado
Autogestion diegorosadoAutogestion diegorosado
Autogestion diegorosadodiego-4
 
Inv novedades fiscales2014 zaragoza
Inv novedades fiscales2014 zaragozaInv novedades fiscales2014 zaragoza
Inv novedades fiscales2014 zaragozaAnna Forastier
 
U8 t1 act_2_raul_mp
U8 t1 act_2_raul_mpU8 t1 act_2_raul_mp
U8 t1 act_2_raul_mpcoyotecosmic
 
Las siete maravillas del mundo
Las siete maravillas del mundoLas siete maravillas del mundo
Las siete maravillas del mundojekasuarez25
 
Pregon para anunciar la cuaresma
Pregon para anunciar la cuaresmaPregon para anunciar la cuaresma
Pregon para anunciar la cuaresmairissubir
 
Aulas Tradicionales-Aulas Virtuales
Aulas Tradicionales-Aulas Virtuales Aulas Tradicionales-Aulas Virtuales
Aulas Tradicionales-Aulas Virtuales JosselynJumbo5
 
Violencia familiar Computo l
Violencia familiar Computo lViolencia familiar Computo l
Violencia familiar Computo ljotha7
 
Practica de mi ple
Practica de mi plePractica de mi ple
Practica de mi plemejiasarria
 
Tarea seminario 10
Tarea seminario 10Tarea seminario 10
Tarea seminario 10alba2994
 

Viewers also liked (16)

Como se trabaja matemáticas con estudiantes con un
Como se trabaja matemáticas con estudiantes con unComo se trabaja matemáticas con estudiantes con un
Como se trabaja matemáticas con estudiantes con un
 
Goldmedia Interaktions-Index Februar_2013_Deutsche Fluggesellschaften
Goldmedia Interaktions-Index Februar_2013_Deutsche FluggesellschaftenGoldmedia Interaktions-Index Februar_2013_Deutsche Fluggesellschaften
Goldmedia Interaktions-Index Februar_2013_Deutsche Fluggesellschaften
 
Fairy tail_378
Fairy tail_378Fairy tail_378
Fairy tail_378
 
Laobesidad
LaobesidadLaobesidad
Laobesidad
 
Goldmedia Aufmerksamkeits-Index
Goldmedia Aufmerksamkeits-IndexGoldmedia Aufmerksamkeits-Index
Goldmedia Aufmerksamkeits-Index
 
Manual Básico de flash 8
Manual Básico de flash 8Manual Básico de flash 8
Manual Básico de flash 8
 
Entrenamiento de perros
Entrenamiento de perrosEntrenamiento de perros
Entrenamiento de perros
 
Autogestion diegorosado
Autogestion diegorosadoAutogestion diegorosado
Autogestion diegorosado
 
Inv novedades fiscales2014 zaragoza
Inv novedades fiscales2014 zaragozaInv novedades fiscales2014 zaragoza
Inv novedades fiscales2014 zaragoza
 
U8 t1 act_2_raul_mp
U8 t1 act_2_raul_mpU8 t1 act_2_raul_mp
U8 t1 act_2_raul_mp
 
Las siete maravillas del mundo
Las siete maravillas del mundoLas siete maravillas del mundo
Las siete maravillas del mundo
 
Pregon para anunciar la cuaresma
Pregon para anunciar la cuaresmaPregon para anunciar la cuaresma
Pregon para anunciar la cuaresma
 
Aulas Tradicionales-Aulas Virtuales
Aulas Tradicionales-Aulas Virtuales Aulas Tradicionales-Aulas Virtuales
Aulas Tradicionales-Aulas Virtuales
 
Violencia familiar Computo l
Violencia familiar Computo lViolencia familiar Computo l
Violencia familiar Computo l
 
Practica de mi ple
Practica de mi plePractica de mi ple
Practica de mi ple
 
Tarea seminario 10
Tarea seminario 10Tarea seminario 10
Tarea seminario 10
 

More from Cloudcamp

Immo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enx
Immo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enxImmo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enx
Immo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enxCloudcamp
 
Chris Boos, arago AG: Big Data means new programs
Chris Boos, arago AG: Big Data means new programsChris Boos, arago AG: Big Data means new programs
Chris Boos, arago AG: Big Data means new programsCloudcamp
 
Don Rekko,Eucaly hybrid or hybird
Don Rekko,Eucaly   hybrid or hybirdDon Rekko,Eucaly   hybrid or hybird
Don Rekko,Eucaly hybrid or hybirdCloudcamp
 
Clemens engler, IBM: smarte is vs auf dem weg in die cloud
Clemens engler, IBM: smarte is vs auf dem weg in die cloudClemens engler, IBM: smarte is vs auf dem weg in die cloud
Clemens engler, IBM: smarte is vs auf dem weg in die cloudCloudcamp
 
Thomas latz wie sich unternehmen hybrid der cloud annaehern
Thomas latz   wie sich unternehmen hybrid der cloud annaehernThomas latz   wie sich unternehmen hybrid der cloud annaehern
Thomas latz wie sich unternehmen hybrid der cloud annaehernCloudcamp
 
Max Ahrens Different Clouds
Max Ahrens   Different CloudsMax Ahrens   Different Clouds
Max Ahrens Different CloudsCloudcamp
 
Paul Huppertz Cloud Computing From System Design To Service Composing
Paul Huppertz  Cloud Computing    From System Design To Service ComposingPaul Huppertz  Cloud Computing    From System Design To Service Composing
Paul Huppertz Cloud Computing From System Design To Service ComposingCloudcamp
 
Mark Philipp Kost Private Cloud
Mark Philipp Kost   Private CloudMark Philipp Kost   Private Cloud
Mark Philipp Kost Private CloudCloudcamp
 
Matthias Jung Cloud Security New Problem Or New Context
Matthias Jung   Cloud Security New Problem Or New ContextMatthias Jung   Cloud Security New Problem Or New Context
Matthias Jung Cloud Security New Problem Or New ContextCloudcamp
 
Cedric Huesler Data First Approach
Cedric Huesler   Data First ApproachCedric Huesler   Data First Approach
Cedric Huesler Data First ApproachCloudcamp
 
Li So G Osci
Li So G OsciLi So G Osci
Li So G OsciCloudcamp
 
Chris Boos No Cloud Without Automation
Chris Boos   No Cloud Without AutomationChris Boos   No Cloud Without Automation
Chris Boos No Cloud Without AutomationCloudcamp
 
Uri Budnik Stories From The Trenches
Uri Budnik   Stories From The TrenchesUri Budnik   Stories From The Trenches
Uri Budnik Stories From The TrenchesCloudcamp
 

More from Cloudcamp (13)

Immo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enx
Immo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enxImmo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enx
Immo Wehrenberg, ENX: SkIDentity sichere Cloud-Identitäten im enx
 
Chris Boos, arago AG: Big Data means new programs
Chris Boos, arago AG: Big Data means new programsChris Boos, arago AG: Big Data means new programs
Chris Boos, arago AG: Big Data means new programs
 
Don Rekko,Eucaly hybrid or hybird
Don Rekko,Eucaly   hybrid or hybirdDon Rekko,Eucaly   hybrid or hybird
Don Rekko,Eucaly hybrid or hybird
 
Clemens engler, IBM: smarte is vs auf dem weg in die cloud
Clemens engler, IBM: smarte is vs auf dem weg in die cloudClemens engler, IBM: smarte is vs auf dem weg in die cloud
Clemens engler, IBM: smarte is vs auf dem weg in die cloud
 
Thomas latz wie sich unternehmen hybrid der cloud annaehern
Thomas latz   wie sich unternehmen hybrid der cloud annaehernThomas latz   wie sich unternehmen hybrid der cloud annaehern
Thomas latz wie sich unternehmen hybrid der cloud annaehern
 
Max Ahrens Different Clouds
Max Ahrens   Different CloudsMax Ahrens   Different Clouds
Max Ahrens Different Clouds
 
Paul Huppertz Cloud Computing From System Design To Service Composing
Paul Huppertz  Cloud Computing    From System Design To Service ComposingPaul Huppertz  Cloud Computing    From System Design To Service Composing
Paul Huppertz Cloud Computing From System Design To Service Composing
 
Mark Philipp Kost Private Cloud
Mark Philipp Kost   Private CloudMark Philipp Kost   Private Cloud
Mark Philipp Kost Private Cloud
 
Matthias Jung Cloud Security New Problem Or New Context
Matthias Jung   Cloud Security New Problem Or New ContextMatthias Jung   Cloud Security New Problem Or New Context
Matthias Jung Cloud Security New Problem Or New Context
 
Cedric Huesler Data First Approach
Cedric Huesler   Data First ApproachCedric Huesler   Data First Approach
Cedric Huesler Data First Approach
 
Li So G Osci
Li So G OsciLi So G Osci
Li So G Osci
 
Chris Boos No Cloud Without Automation
Chris Boos   No Cloud Without AutomationChris Boos   No Cloud Without Automation
Chris Boos No Cloud Without Automation
 
Uri Budnik Stories From The Trenches
Uri Budnik   Stories From The TrenchesUri Budnik   Stories From The Trenches
Uri Budnik Stories From The Trenches
 

Sascha Dittmann, Ernst & Young: Big Data in der Cloud

  • 1. * Sascha Dittmann Software Developer / Solution Architect Twitter: @SaschaDittmann Blog: http://www.sascha-dittmann.de
  • 2. * Seit über 13 Jahren: * Software Developer * Solution Architect * Seit über 7 Jahren: * Trainer für technische Trainings * Sprecher auf Konferenzen * IT Consulting *
  • 4. 180.000.000.000.000.000.000 = 0,18 ZB (Zettabytes) - Stand 2006 1.800.000.000.000.000.000.000 = 1,8 ZB (Zettabytes) - Stand 2011 * Quelle: IDC – Analyze the Future
  • 5. Vertikale Skalierung Horizontale Skalierung *
  • 6. Atomicy Basically Consistecy Available Isolation Soft State Durabilty Eventually Consistent *
  • 7. *
  • 8. DataNode DataNode DataNode 0067011990999991950051507004+68750 0043011990999991950051512004+68750 0043011990999991950051518004+68750 0043012650999991949032412004+62300 0043012650999991949032418004+62300 1949,0 1952,-11 Map Map Map 1950,22 1950,55 1950,33 Sort Sort Sort 1949,0 1950,[22,33,55] Shuffle Shuffle Shuffle 1952,-11 Reduce 1949,0 1950,55 1952,-11 *
  • 9. DataNode DataNode DataNode 0067011990999991950051507004+68750 0043011990999991950051512004+68750 0043011990999991950051518004+68750 0043012650999991949032412004+62300 0043012650999991949032418004+62300 1949,0 1952,-11 Map Map Map 1950,22 1950,55 1950,33 1949,0 1952,-11 Combine Combine Combine 1950,55 1950,33 Sort Sort Sort 1949,0 1950,[33,55] Shuffle Shuffle Shuffle 1952,-11 Reduce 1949,0 1950,55 1952,-11 *
  • 10. RDBMS Map/Reduce Datenmenge Gigabytes Petabytes Zugriff Interaktiv und Batch Batch Lese- / Schreibzugriffe Viele Lese- und Einmaliges Schreiben Schreibzugriffe Viele Lesezugriffe Datenstruktur Statisches Schema Dynamisches Schema Datenintegrität Hoch Niedrig Skalierverhalten Nicht-Linear Linear *
  • 11. *