Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Big-Data-Architekturen

420 views

Published on

… und 10 typische Stolpersteine auf dem Weg dahin

Published in: Software
  • DOWNLOAD FULL BOOKS, INTO AVAILABLE FORMAT ......................................................................................................................... ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • DOWNLOAD FULL BOOKS, INTO AVAILABLE FORMAT ......................................................................................................................... ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • DOWNLOAD FULL BOOKS, INTO AVAILABLE FORMAT ......................................................................................................................... ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • DOWNLOAD FULL BOOKS, INTO AVAILABLE FORMAT ......................................................................................................................... ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • DOWNLOAD FULL BOOKS, INTO AVAILABLE FORMAT ......................................................................................................................... ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. PDF EBOOK here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. EPUB Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... 1.DOWNLOAD FULL. doc Ebook here { https://tinyurl.com/y6a5rkg5 } ......................................................................................................................... ......................................................................................................................... ......................................................................................................................... .............. Browse by Genre Available eBooks ......................................................................................................................... Art, Biography, Business, Chick Lit, Children's, Christian, Classics, Comics, Contemporary, Cookbooks, Crime, Ebooks, Fantasy, Fiction, Graphic Novels, Historical Fiction, History, Horror, Humor And Comedy, Manga, Memoir, Music, Mystery, Non Fiction, Paranormal, Philosophy, Poetry, Psychology, Religion, Romance, Science, Science Fiction, Self Help, Suspense, Spirituality, Sports, Thriller, Travel, Young Adult,
       Reply 
    Are you sure you want to  Yes  No
    Your message goes here
  • Be the first to like this

Big-Data-Architekturen

  1. 1. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich  Überraschend mehr Möglichkeiten © OPITZ CONSULTING 2018 … und 10 typische Stolpersteine auf dem Weg dahin Lukas Berle Big-Data-Architekturen
  2. 2. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Who am I? Lukas Berle  Big Data Software Engineering Lead @ OPITZ CONSULTING  Scalable Computing  Big-Data-Architekturen  Hadoop Infrastruktur Setup  Docker & Kubernetes
  3. 3. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Seite 3 Überblick 1 2 Big Data Architekturen Zehn Stolpersteine Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin
  4. 4. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 4 Die klassische Data Warehouse Architektur
  5. 5. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 5 Data Lake Grobarchitektur
  6. 6. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 6 Data Lake Feinarchitektur
  7. 7. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 7 Hadoop als Active Archive
  8. 8. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 8 DWH Architektur mit Streaming Layer
  9. 9. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 9 DWH Architektur mit Streaming Layer
  10. 10. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle - Big Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 10 Streaming Architekturen – Lambda Architektur
  11. 11. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle - Big Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 11 Streaming Architekturen – Kappa Architektur
  12. 12. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 12 Spark on Kubernetes
  13. 13. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 13 Stolperstein 1 Don‘t use NoSQL Database SQL-like!
  14. 14. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Stolperstein 2 Hadoop Distribution?! Ich nehm das Open Source Hadoop!
  15. 15. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 15 Stolperstein 3 Big Data != Analytics Analytics < Big Data
  16. 16. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 16 Stolperstein 4 „My 5 men backend-developer team will make it“ Verzweiflung Vorbeugen: • Grundlagenschulung • Spezialistenschulung Es gibt eine Menge an • Bugs • Versionsinkompatibilitäten • Fehlender Doku • Möglichkeiten der Fehlkonfiguration + Hortonworks Commmunity
  17. 17. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 17 Stolperstein 5 Denke in Rollen!
  18. 18. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 18 Stolperstein 6 Warum Big Data Projekte organisatorisch fehlschlagen  Ungenaue Ziele  Falsche Erwartungen  Technologien und vorhandene Skills divergieren zu stark Das „richtige“ erste Big Data Projekt  Nachweisbarer Wert  Management Attention + Sponsoring  Small Use Case for Big Data  Umsetzbar in 6 Monaten
  19. 19. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 19 Stolperstein 7 Automatisierung des Hadoop Infrastruktursetups spart mir viel Geld! Denk an: • Security • Properties • Versionsupdates • Neue Tools
  20. 20. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 20 Stolperstein 8 Entkopplung von Storage und Compute Knoten
  21. 21. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 21 Stolperstein 8 Entkopplung von Storage und Compute Knoten
  22. 22. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 22 Stolperstein 8 Entkopplung von Storage und Compute Knoten
  23. 23. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 23 Stolperstein 9 Halte dich an die richtige Reihenfolge! Hardware Distribution / Technologie Anwendungs- fälle Hardware Distribution / Technologie Anwendungs- fälle
  24. 24. © OPITZ CONSULTING 2018 Informationsklassifikation: Öffentlich Lukas Berle – Big-Data-Architekturen und 10 typische Stolpersteine auf dem Weg dahin Seite 24 Stolperstein 10 Nutze nicht für alles das Beste!

×