Bi Themadag 2011

327 views
263 views

Published on

Published in: Technology
0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
327
On SlideShare
0
From Embeds
0
Number of Embeds
10
Actions
Shares
0
Downloads
0
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide

Bi Themadag 2011

  1. 1. Data WarehouseingEen blik op open source Johannes van den Bosch @johannesvdb
  2. 2. Agenda• Waterschap De Dommel• Uitdagingen• Open source• Architectuur• Take aways
  3. 3. BI bij De Dommel• BIC – Sinds 2004 – 2,0 FTE• Business Objects suite• Rapportages• Direct op de bron
  4. 4. Uitdagingen• Toenemende complexiteit – Meer aanbod (systemen) – Meer vraag – Complexere vraag• Beheersbaarheid• Leveranciersafhankelijkheid
  5. 5. Toenemende complexiteit
  6. 6. flickr.com/timmygunz/32108184
  7. 7. Toenemende complexiteitvraagkant flickr.com/hatm/3465628803aanbodkant
  8. 8. Toenemende complexiteit: beheersbaarheid complexiteit tijd Toenemende beheerslasten, druk op ontwikkeling
  9. 9. Leveranciersafhankelijkheid rapportage dashboards- business logica - business logica- integratie - integratie- business view - business view- transformaties - transformaties Dubbele bouw- en beheerslasten 
  10. 10. Ontvlechten
  11. 11. Ontvlechten Enterprise Data Warehouse (EDW)
  12. 12. Open source• Top down vs. Bottom up aanpak• Onze aanpak: – Eerst praktijkervaringen opdoen – Concrete problemen oplossen – Impuls voor beleid• Ondersteuning management belangrijk, innovativiteit• Redenen: – Leveranciersonafhankelijkheid – Ondersteuning los van product – Kosten
  13. 13. Terug naar het EDW Enterprise Data Warehouse (EDW)
  14. 14. Architectuur Rapportage Analyse Dashboards Vraag Data mart 1 Data mart n gestuurd Business Data Vault Source Data Vault 1 Source Data Vault 2 Source Data Vault n Aanbod Gegenereerd en geautomatiseerdn Staging 1 Staging 2 Staging gedreven Bron 1 Bron 2 Bron n
  15. 15. Hybride aanpak• Geen waterval aanpak• Begin met systemen ontsluiten – Aanbod gedreven• Start ondertussen informatie analyse – Bepaal vraag• Verbind vraag en aanbod in de Business Data Vault• Bouw data marts voor simpele ontsluiting
  16. 16. Hybride aanpakinspanning aanbod gedreven vraag gestuurd tijd
  17. 17. Hybride aanpak• Bouw Business Data Vault is eenvoudig – Data reeds in Data Vault vorm – Integratie op business key – Vertalen naar een bedrijfsgegevensmodel – Views bovenop Source Data Vaults• Bouw Data Marts is eenvoudig – Views bovenop Business Data Vault – Dimensie: hub + satelliet – Feit: link + satelliet
  18. 18. Hoge mate van automatisering• Staging gegenereerd• Source data vaults generereerd• Zowel structuur als laadroutines• Tools: – Quipu (beheren, genereren) – Pentaho Data Integration (uitvoeren) – Geïntegreerd
  19. 19. Ervaringscijfers release 1• Ontsloten systemen: 4• Investeringen: 0,- €• Interne capaciteit: 2x 0,3 FTE• Doorlooptijd tot eerste iteratie: 4 maanden• Momenteel loopt eerste ontsluitingsproject
  20. 20. Uitdagingen: toenemende complexiteit• Systeemoverschrijdende informatie – Integratie opgelost in bDV-laag• Nieuwe bronnen – Toevoegen (genereren) – Daarna bDV-laag uitbreiden
  21. 21. Uitdagingen: beheersbaarheid• Toevoegingen hebben geen fysieke impact op bestaande structuren in EDW• Het EDW is lineair uitbreidbaar; agile complexiteit tijd
  22. 22. Uitdagingen: leveranciersafhankelijkheid• Gelaagde architectuur, componenten• Componenten te vervangen• Nieuwe ontsluitingsvormen sluiten aan op bestaande data marts• Kiezen voor ‘best tool for the job’
  23. 23. Take aways• Beoordeel je BI architectuur ook op toekomstvastheid: flexibiliteit, uitbreidbaarheid, lock-in.• Het is mogelijk met lage begininvesteringen naar resultaat toe te werken dankzij automatisering  PoC?• Open source tools zoals Quipu: hoe meer users, hoe meer verbeteringen, goed voor iedereen!
  24. 24. Meer informatie• Blog: johannesvdb.blogspot.com• Twitter: @johannesvdb• Artikel DB/M 1-2011: Van spaghetti naar lasagne

×