SlideShare a Scribd company logo
1 of 45
Download to read offline
Data Visualization
   Week 2 - Stappen en Tools
Programma

• Data Spelunking
• Alle stappen met bijbehorende tools
• Kiezen van een goede databron
• Concept-ontwikkeling
Opdracht volgende
        week
• Kiezen van een databron
• Vertellen waarom deze interessant is
  (concreet)
• Verzinnen van een concept: Welke data wil
  je gebruiken om wat te vertellen?
  (in 3 of meer schetsen)
Stappen
Stappen
• acquire
• parse
• filter
• mine
• represent
• refine
• interact
Acquire
Daytum
data.gov.us
   data.gov.uk
data.overheid.nl…
Guardian Datablog
Bellen
API / Developer
Command line
Parse
Data Formaten
•   Word, Excel   •   CSV (tekst, tab)

•   SQL           •   HTML

•   PDF           •   XML

•   Shapefile      •   JSON
Excel
Google Fusion Tables
Many Eyes
Tableau
Filter
Text Editor
Python
fileHandle = open('outcome.csv', 'r')
reader = csv.reader(fileHandle)

for line in reader:
   name = line[0]

  print name
Regular Expressions
•   .             •   a?

•   [0-9] [acd]   •   a*

•   s w d      •   [acd]+

                  •   a{3, 5} a{4}

•   ^a

•   a$
Mine
Statistiek


• Gemiddelde
• Variantie
Clustering
Regressie
RStats
en meer…
Represent
Processing
Download and try out
Toxiclibs
Processing.js
Gephi
Quartz Composer
Gapminder
Impure
Refine
Volgende week

• Bekijken concepten
• Information Design
• Critique
• Visualize
Recommended Reading


• Tufte
• Information is Beautiful
Dataset Roundtable

More Related Content

Similar to Willem de Kooning - dataviz - week 2

KPI definitie en dashboarding
KPI definitie en dashboardingKPI definitie en dashboarding
KPI definitie en dashboardingDaan Goor
 
Knowledge Graphs: Concept, mogelijkheden en aandachtspunten
Knowledge Graphs: Concept, mogelijkheden en aandachtspuntenKnowledge Graphs: Concept, mogelijkheden en aandachtspunten
Knowledge Graphs: Concept, mogelijkheden en aandachtspuntenChristophe Debruyne
 
De kracht van Structured Data
De kracht van Structured DataDe kracht van Structured Data
De kracht van Structured DataOrangeValley
 
Technische SEO in 2020
Technische SEO in 2020Technische SEO in 2020
Technische SEO in 2020OrangeValley
 
Project AtLast (CWA1-1112)
Project AtLast (CWA1-1112)Project AtLast (CWA1-1112)
Project AtLast (CWA1-1112)Mattias Buelens
 
Software Engineering College 2 - ETL and databases
Software Engineering College 2 - ETL and databasesSoftware Engineering College 2 - ETL and databases
Software Engineering College 2 - ETL and databasesJurjen Helmus
 
Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...
Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...
Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...Nicky van Vroenhoven
 
Voordeel halen uit zoekmachines en semantic web
Voordeel halen uit zoekmachines en semantic webVoordeel halen uit zoekmachines en semantic web
Voordeel halen uit zoekmachines en semantic webBart Hanssens
 
SharePoint Enterprise Search - SharePoint Truths
SharePoint Enterprise Search - SharePoint TruthsSharePoint Enterprise Search - SharePoint Truths
SharePoint Enterprise Search - SharePoint TruthsSparked
 
WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)
WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)
WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)TimelessFuture
 
NL Front-end Guidelines (HTML,CSS,Javascript)
NL Front-end Guidelines (HTML,CSS,Javascript)NL Front-end Guidelines (HTML,CSS,Javascript)
NL Front-end Guidelines (HTML,CSS,Javascript)Mathijs Jong
 
Metadata oplossingen
Metadata oplossingenMetadata oplossingen
Metadata oplossingengrus001
 
Willem de Kooning - week 1.key
Willem de Kooning - week 1.keyWillem de Kooning - week 1.key
Willem de Kooning - week 1.keyAlper Çugun
 
JSON-LD: Linked Data voor developers
JSON-LD: Linked Data voor developersJSON-LD: Linked Data voor developers
JSON-LD: Linked Data voor developersDimitri van Hees
 
Zoeken in SharePoint by Arno Flapper Imtech ICT
Zoeken in SharePoint by Arno Flapper Imtech ICTZoeken in SharePoint by Arno Flapper Imtech ICT
Zoeken in SharePoint by Arno Flapper Imtech ICTDynamic People B.V.
 
Software Engineering College 4 - exploring data
Software Engineering College 4 - exploring dataSoftware Engineering College 4 - exploring data
Software Engineering College 4 - exploring dataJurjen Helmus
 
Semantische zoekmachines voor wetenschap: een stresstest
Semantische zoekmachines voor wetenschap: een stresstestSemantische zoekmachines voor wetenschap: een stresstest
Semantische zoekmachines voor wetenschap: een stresstestvoginip
 
Gentrepreneur WEEK - infosessie de geheimen van data
Gentrepreneur WEEK - infosessie de geheimen van dataGentrepreneur WEEK - infosessie de geheimen van data
Gentrepreneur WEEK - infosessie de geheimen van dataGentrepreneur
 
Testnet - Workshop Data Profiling voor Testers 20160511 - DEF
Testnet - Workshop Data Profiling voor Testers 20160511 - DEFTestnet - Workshop Data Profiling voor Testers 20160511 - DEF
Testnet - Workshop Data Profiling voor Testers 20160511 - DEFdorsek
 

Similar to Willem de Kooning - dataviz - week 2 (20)

KPI definitie en dashboarding
KPI definitie en dashboardingKPI definitie en dashboarding
KPI definitie en dashboarding
 
Knowledge Graphs: Concept, mogelijkheden en aandachtspunten
Knowledge Graphs: Concept, mogelijkheden en aandachtspuntenKnowledge Graphs: Concept, mogelijkheden en aandachtspunten
Knowledge Graphs: Concept, mogelijkheden en aandachtspunten
 
De kracht van Structured Data
De kracht van Structured DataDe kracht van Structured Data
De kracht van Structured Data
 
Technische SEO in 2020
Technische SEO in 2020Technische SEO in 2020
Technische SEO in 2020
 
Project AtLast (CWA1-1112)
Project AtLast (CWA1-1112)Project AtLast (CWA1-1112)
Project AtLast (CWA1-1112)
 
Software Engineering College 2 - ETL and databases
Software Engineering College 2 - ETL and databasesSoftware Engineering College 2 - ETL and databases
Software Engineering College 2 - ETL and databases
 
Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...
Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...
Power BI (Premium) Implementatie in een Financiële Instelling - PBIG Gebruike...
 
Voordeel halen uit zoekmachines en semantic web
Voordeel halen uit zoekmachines en semantic webVoordeel halen uit zoekmachines en semantic web
Voordeel halen uit zoekmachines en semantic web
 
SharePoint Enterprise Search - SharePoint Truths
SharePoint Enterprise Search - SharePoint TruthsSharePoint Enterprise Search - SharePoint Truths
SharePoint Enterprise Search - SharePoint Truths
 
WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)
WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)
WebART: hoe maak je webarchieven bruikbaar voor de wetenschap? (Dutch)
 
NL Front-end Guidelines (HTML,CSS,Javascript)
NL Front-end Guidelines (HTML,CSS,Javascript)NL Front-end Guidelines (HTML,CSS,Javascript)
NL Front-end Guidelines (HTML,CSS,Javascript)
 
Metadata oplossingen
Metadata oplossingenMetadata oplossingen
Metadata oplossingen
 
Oracle Big Data met R Enterprise en OBIEE
Oracle Big Data met R Enterprise en OBIEEOracle Big Data met R Enterprise en OBIEE
Oracle Big Data met R Enterprise en OBIEE
 
Willem de Kooning - week 1.key
Willem de Kooning - week 1.keyWillem de Kooning - week 1.key
Willem de Kooning - week 1.key
 
JSON-LD: Linked Data voor developers
JSON-LD: Linked Data voor developersJSON-LD: Linked Data voor developers
JSON-LD: Linked Data voor developers
 
Zoeken in SharePoint by Arno Flapper Imtech ICT
Zoeken in SharePoint by Arno Flapper Imtech ICTZoeken in SharePoint by Arno Flapper Imtech ICT
Zoeken in SharePoint by Arno Flapper Imtech ICT
 
Software Engineering College 4 - exploring data
Software Engineering College 4 - exploring dataSoftware Engineering College 4 - exploring data
Software Engineering College 4 - exploring data
 
Semantische zoekmachines voor wetenschap: een stresstest
Semantische zoekmachines voor wetenschap: een stresstestSemantische zoekmachines voor wetenschap: een stresstest
Semantische zoekmachines voor wetenschap: een stresstest
 
Gentrepreneur WEEK - infosessie de geheimen van data
Gentrepreneur WEEK - infosessie de geheimen van dataGentrepreneur WEEK - infosessie de geheimen van data
Gentrepreneur WEEK - infosessie de geheimen van data
 
Testnet - Workshop Data Profiling voor Testers 20160511 - DEF
Testnet - Workshop Data Profiling voor Testers 20160511 - DEFTestnet - Workshop Data Profiling voor Testers 20160511 - DEF
Testnet - Workshop Data Profiling voor Testers 20160511 - DEF
 

More from Alper Çugun

Code camping amsterdam day proceedings
Code camping amsterdam   day proceedingsCode camping amsterdam   day proceedings
Code camping amsterdam day proceedingsAlper Çugun
 
Willem de kooning - week 3 - visualisatie
Willem de kooning  - week 3 - visualisatieWillem de kooning  - week 3 - visualisatie
Willem de kooning - week 3 - visualisatieAlper Çugun
 
App engine beats pony.key
App engine beats pony.keyApp engine beats pony.key
App engine beats pony.keyAlper Çugun
 
Dutchstats keynote short
Dutchstats keynote   shortDutchstats keynote   short
Dutchstats keynote shortAlper Çugun
 
Open data obstakels - Hogeschool Rotterdam.key
Open data obstakels - Hogeschool Rotterdam.keyOpen data obstakels - Hogeschool Rotterdam.key
Open data obstakels - Hogeschool Rotterdam.keyAlper Çugun
 
Foursquare and Location Based Services
Foursquare and Location Based ServicesFoursquare and Location Based Services
Foursquare and Location Based ServicesAlper Çugun
 
What Makes You Horny? Big Data!
What Makes You Horny? Big Data!What Makes You Horny? Big Data!
What Makes You Horny? Big Data!Alper Çugun
 
What Makes You Horny? Big Data!
What Makes You Horny? Big Data!What Makes You Horny? Big Data!
What Makes You Horny? Big Data!Alper Çugun
 
Content Syndicatie
Content SyndicatieContent Syndicatie
Content SyndicatieAlper Çugun
 
De Geest van de Webrichtlijnen
De Geest van de WebrichtlijnenDe Geest van de Webrichtlijnen
De Geest van de WebrichtlijnenAlper Çugun
 
Scrape de Overheid
Scrape de OverheidScrape de Overheid
Scrape de OverheidAlper Çugun
 
Widgets Belastingdienst
Widgets BelastingdienstWidgets Belastingdienst
Widgets BelastingdienstAlper Çugun
 
Free Economies Reboot
Free Economies   RebootFree Economies   Reboot
Free Economies RebootAlper Çugun
 
Portable Social Networks
Portable Social NetworksPortable Social Networks
Portable Social NetworksAlper Çugun
 

More from Alper Çugun (16)

Code camping amsterdam day proceedings
Code camping amsterdam   day proceedingsCode camping amsterdam   day proceedings
Code camping amsterdam day proceedings
 
Willem de kooning - week 3 - visualisatie
Willem de kooning  - week 3 - visualisatieWillem de kooning  - week 3 - visualisatie
Willem de kooning - week 3 - visualisatie
 
App engine beats pony.key
App engine beats pony.keyApp engine beats pony.key
App engine beats pony.key
 
Dutchstats keynote short
Dutchstats keynote   shortDutchstats keynote   short
Dutchstats keynote short
 
Open data obstakels - Hogeschool Rotterdam.key
Open data obstakels - Hogeschool Rotterdam.keyOpen data obstakels - Hogeschool Rotterdam.key
Open data obstakels - Hogeschool Rotterdam.key
 
Foursquare and Location Based Services
Foursquare and Location Based ServicesFoursquare and Location Based Services
Foursquare and Location Based Services
 
What Makes You Horny? Big Data!
What Makes You Horny? Big Data!What Makes You Horny? Big Data!
What Makes You Horny? Big Data!
 
What Makes You Horny? Big Data!
What Makes You Horny? Big Data!What Makes You Horny? Big Data!
What Makes You Horny? Big Data!
 
Content Syndicatie
Content SyndicatieContent Syndicatie
Content Syndicatie
 
De Geest van de Webrichtlijnen
De Geest van de WebrichtlijnenDe Geest van de Webrichtlijnen
De Geest van de Webrichtlijnen
 
Scrape de Overheid
Scrape de OverheidScrape de Overheid
Scrape de Overheid
 
Widgets Belastingdienst
Widgets BelastingdienstWidgets Belastingdienst
Widgets Belastingdienst
 
Free Economies Reboot
Free Economies   RebootFree Economies   Reboot
Free Economies Reboot
 
Kado Experience
Kado ExperienceKado Experience
Kado Experience
 
Free Economies
Free Economies Free Economies
Free Economies
 
Portable Social Networks
Portable Social NetworksPortable Social Networks
Portable Social Networks
 

Willem de Kooning - dataviz - week 2

Editor's Notes

  1. Ik ga snel en ingewikkeld. Onderbreek me wanneer je wilt.\n
  2. \n
  3. Voor het einde van de les het liefst mij al vertellen waar je naar toe wilt zoeken en waarom, dan kunnen we zorgen dat we iets pakken wat kansrijk is. (Mag ook in de loop van de week, maar liever niet.)\n\nVerder: volgende week drie concepten in schetsen.\n
  4. Er zijn heel veel tools.\n
  5. Uitleggen wat de stappen inhouden.\n\nRecht uit Ben Fry’s Visualizing Data, vergelijk met de OODA loop\n
  6. OODA Loop, iteratief proces\n
  7. \n
  8. http://daytum.com/\nhttp://daytum.com/charleylhasa\n\nZelf verzamelen.\n
  9. \n
  10. \n
  11. World Bank\nCIA Factbook\nHRW, WNF etc. (rapporten, rapporten, rapporten)\n\nKijk eens rond.\n
  12. bellen en vragen, werkt meestal niet, maar soms wel en anders kun je erachter komen wat je moet doen om die data wel te krijgen\n\nVraag: Hoe zou jij data verkrijgen? Wat zou je willen hebben? Hoe verwacht je eraan te komen?\n
  13. De meeste websites (Foursquare, Last.fm, Flickr) hebben dit tegenwoordig. Het vrijgeven van data aan anderen om vette dingen mee te maken.\n\nniet altijd even makkelijk, soms wat dumps\n
  14. wget --help\nman wget\n\ncd /tmp\nmkdir test\ncd test\ntouch\n\n
  15. Het inlezen van de data, afhankelijk van het formaat. Soms nog wel lastig maar vaak wel te doen.\n
  16. \n
  17. ik heb geen Excel, dus ik laat het even via Numbers zien\nof Google Docs\nmaar Excel is wel redelijk de koning voor de Excel jockeys\n
  18. World Data - Cigarettes per adult per year\nTech Map of Britain\nSecondary schools for fusion\n
  19. http://www-958.ibm.com/software/data/cognos/manyeyes/visualizations/new/bar-chart/coffee-consumption-by-country-60kg/1\n
  20. run video?\n
  21. \n
  22. Textmate, Textwrangler\n
  23. \n
  24. do CSV reader demo\n
  25. http://regexpal.com/\n\nThink of example for them to play with.\n
  26. Wat betekent het nu? Goed als je wat basis dingen weet maar schakel een echte statisticus in.\n
  27. \n
  28. http://home.dei.polimi.it/matteucc/Clustering/tutorial_html/AppletKM.html\n
  29. http://science.kennesaw.edu/~plaval/applets/LRegression.html\n
  30. not SPSS\nMathematica\nMatlab\nRStats demo…\n
  31. Recommenders\nClassificatie\n(Interactieve visualisatie.)\n
  32. \n
  33. \n
  34. Download Processing, start hem, kijk naar de demo’s en wat je ermee kunt\n
  35. show toxiclibs reel: http://vimeo.com/15379147\n
  36. reel: http://toxiclibs.org/2010/08/cfp-community-showreel-2010/\n
  37. web ready\n
  38. graphs, networks: http://www.youtube.com/watch?v=6rURezjoEDo\n
  39. \n
  40. Gapminder video, look into software toolkit\n
  41. http://www.youtube.com/user/impuremotion#p/u/0/ZdSgrFQmY74\nhttp://www.impure.com/\ntutorial: http://www.youtube.com/watch?v=4oc47BB374U\n
  42. Kijk, critique, expand, plussing en ga door.\n
  43. \n
  44. \n
  45. \n