De ontwikkelingen op het gebied van Big data en Web-scale technieken gaan razendsnel. Hoe ontwerp en realiseer je nu architecturen die steeds grotere datastromen kunnen verwerken? Quintor gaat in deze Keynote in op twee belangrijke producten: Hadoop (Storm, HDFS en Map Reduce) en Akka Reactive Streams.

1. Quintor
Web-scale op basis van
Hadoop
JOHAN
TILLEMA
CEO

2. Quintor
Quintor
JAVA
.NET
MOBILE
GRONINGEN
AMERSFOORT
78 MEDEWERKERS
AGILE/SCRUM
ATLASSIAN
MS TFS
ANALYSE
2005
SOFTWARE
DEVELOPERS

3. Quintor
Big data
=
Web-Scale

4. Facebook
> 300PB aan data
1 miljoen foto's per seconde
100 miljard page hits per dag
Slaat 1000 miljard items op
(foto's, events, statusupdates…)

5. Twitter
500 miljoen tweets per dag
300.000 queries per seconde
Tientallen petabytes structured data
Tweet binnen vijf seconden bij volgers

6. Whatsapp
65 miljard berichten per dag
450 miljoen actieve gebruikers
150 miljoen tegelijk online
150Gb/s traffic
Nagenoeg real-time

7. 1/3e van het internet verkeer in Amerika
Streamt 1 miljard uur content per maand
30 miljoen 'plays' per dag
Enkele petabytes aan videomateriaal en metadata

8. Quintor
Cheap hardware
clusters
Lineair schaling
Parallel computing

9. Quintor
Quintor
Summercamp

10. Quintor
RENE BOERE
CTO

11. Quintor
Web-scale technieken

12. Quintor
Big Willem

13. Quintor
Reactive streams

14. Quintor
Hadoop @ hardware clusters
YARN
HDFS
(Hadoop Distributed File system)
Ambari
Zookeeper
Map
Reduce Spark Storm HBase Pig …
Ganglia / Nagios

15. Quintor
CHRIS
QUACH
JAVA
SPECIALIST

16. Quintor
Pinguin demo

17. Quintor
Hadoop @ hardware clusters
YARN
HDFS
(Hadoop Distributed File system)
Ambari
Zookeeper
Map
Reduce Spark Storm HBase Pig …
Ganglia / Nagios

18. Quintor
Breadth First Search
7.5
7.4 7.6
6.4 7.3 8.4 8.6
7.7
8.3 9.6
8.7
9.3 9.4 9.5 9.7

19. Quintor
7.5 0 7.4,7.6
7.4 MAX_VALUE 6.4,7.3,7.5,8.4
7.6 MAX_VALUE 7.5,7.7,8.6
6.4 MAX_VALUE 7.4
7.3 MAX_VALUE 7.4,8.3
8.4 MAX_VALUE 7.4,8.3
8.3 MAX_VALUE 7.3,9.3
9.3 MAX_VALUE 8.3,9.4
9.4 MAX_VALUE 8.4,9.3,9.5

20. Quintor
Storm topology
InputSpout
PersistBolt
ProcessBolt

21. Quintor
Breadth First Search
7.5
7.4 7.6
6.4 7.3 8.4 8.6
7.7
8.3 9.6
8.7
9.3 9.4 9.5 9.7

22. Quintor
Breadth First Search
7.5
7.4 7.6
6.4 7.3 8.4 8.6
7.7
8.3 9.6
8.7
9.3 9.4 9.5 9.7

23. Quintor
Storm topology
InputSpout
PersistBolt
IntermediateBolt
ProcessBolt

24. Quintor
BIG DATA VEREIST WEB-SCALE DENKEN
WEB-SCALE VERANDERT ALLES
DE TECHNOLOGIE WORDT NU ONTWIKKELD

25. Quintor
10:50
VERVOLGSESSIE
SALVADOR
27 NOVEMBER
HANDS-ON WEBSCALE
STAND RECHTS NAAST DE
INGANG
14:30
JSF -> SPA MIGRATIE
REMBRANDT

26. “Once you stop learning, you start dying”
Quintor
Bedankt voor jullie aandacht
- Albert Einstein
Quintor

27. Quintor
Bedankt voor jullie aandacht