Que pourrait-on retenir du Hadoop Summit 2012

1. HUG France #3 – 28 Juin 2012
Retour du Hadoop Summit 2012
BigData
Camp
Une p'tite virée dans la Silicon Vallée
Charly CLAIRMONT
charly.clairmont@altic.org
@egwada
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation
Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

2. Hadoop révolutionne !
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation
Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

3. Architecture BigData
● Multistructured Data
● Non structuré + Structuré
● BigData
● NoSQL + Hadoop + SGBDR
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale
- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

4. BigData est partout
● Digitalisation de la culture
● BigData
● Vers une nouvelle économie (encore une autre)
●
Vers la Troisième Révolution Industrielle (cf : Jeremy Rifkin)
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale
- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

5. De nouvelles frontières pour Hadoop
● Hadoop HA
● HDFS Federated
● Map Reduce 2.0 aka Yarn
● Hcatalog
● Ambari
● Hadoop encore plus cloudable
● VMWare / Sorengeti
● Amazon
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale
- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

6. Hadoop Temps réel
● Le nouveau Map Reduce : YARN
● Storm
● Giraph
● S4
● Spark
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale
- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

7. Le grand débat Pig vs Hive
Pig Hive
● New School ● Old School
● Flexible / Simple ● Rigide / Connu
● ETL ● Interrogation
● Mise en œuvre UDF ● JDBC / ODBC
Hadoop DW
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale
- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

8. Mes coups de cœurs
● Spark
● Compatible Hadoop
● Temps réel
– resilient distributed datasets (proche de l'idée de map
reduce online)
● Shark
● Giraph
● Architecture Alternative pour l'Analytique
● Hadoop + Search Engine
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale
- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

9. On aurait aimé voir
● Hyracks
http://code.google.com/p/hyracks/
● Clydesdale
http://sandeeptata.blogspot.fr/2012/01/clydesdale-sql-on-hadoop.html
● ASTERIX
http://asterix.ics.uci.edu
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation Commerciale
- Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/

10. HUG France #3 - 28 Juin 2012
Retour Hadoop Summit 2012
Merci pour votre attention
Charly CLAIRMONT
Charly CLAIRMONT
@egwada
Ce support est mis à disposition selon les termes de la Licence Creative Commons Attribution - Pas d’Utilisation
Commerciale - Pas de Modification 2.0 France. - http://creativecommons.org/licenses/by-nc-nd/2.0/fr/