Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
Data WarehouseingEen blik op open source   Johannes van den Bosch        @johannesvdb
Agenda•   Waterschap De Dommel•   Uitdagingen•   Open source•   Architectuur•   Take aways
BI bij De Dommel• BIC  – Sinds 2004  – 2,0 FTE• Business Objects suite• Rapportages• Direct op de bron
Uitdagingen• Toenemende complexiteit   – Meer aanbod (systemen)   – Meer vraag   – Complexere vraag• Beheersbaarheid• Leve...
Toenemende complexiteit
flickr.com/timmygunz/32108184
Toenemende complexiteitvraagkant                           flickr.com/hatm/3465628803aanbodkant
Toenemende complexiteit: beheersbaarheid  complexiteit                                                  tijd Toenemende be...
Leveranciersafhankelijkheid               rapportage dashboards- business logica                  - business logica- integ...
Ontvlechten
Ontvlechten              Enterprise Data              Warehouse (EDW)
Open source• Top down vs. Bottom up aanpak• Onze aanpak:   – Eerst praktijkervaringen opdoen   – Concrete problemen oploss...
Terug naar het EDW                     Enterprise Data                     Warehouse (EDW)
Architectuur    Rapportage               Analyse               Dashboards                                                 ...
Hybride aanpak• Geen waterval aanpak• Begin met systemen ontsluiten  – Aanbod gedreven• Start ondertussen informatie analy...
Hybride aanpakinspanning             aanbod             gedreven             vraag             gestuurd                   ...
Hybride aanpak• Bouw Business Data Vault is eenvoudig  – Data reeds in Data Vault vorm  – Integratie op business key  – Ve...
Hoge mate van automatisering• Staging gegenereerd• Source data vaults generereerd• Zowel structuur als laadroutines• Tools...
Ervaringscijfers release 1• Ontsloten systemen: 4• Investeringen: 0,- €• Interne capaciteit: 2x 0,3 FTE• Doorlooptijd tot ...
Uitdagingen: toenemende complexiteit• Systeemoverschrijdende informatie  – Integratie opgelost in bDV-laag• Nieuwe bronnen...
Uitdagingen: beheersbaarheid• Toevoegingen hebben geen fysieke impact op  bestaande structuren in EDW• Het EDW is lineair ...
Uitdagingen: leveranciersafhankelijkheid• Gelaagde architectuur, componenten• Componenten te vervangen• Nieuwe ontsluiting...
Take aways• Beoordeel je BI architectuur ook op  toekomstvastheid: flexibiliteit, uitbreidbaarheid,  lock-in.• Het is moge...
Meer informatie• Blog:     johannesvdb.blogspot.com• Twitter: @johannesvdb• Artikel DB/M 1-2011: Van spaghetti naar  lasagne
Bi Themadag 2011
Upcoming SlideShare
Loading in …5
×

Bi Themadag 2011

393 views

Published on

Published in: Technology
  • Be the first to comment

  • Be the first to like this

Bi Themadag 2011

  1. 1. Data WarehouseingEen blik op open source Johannes van den Bosch @johannesvdb
  2. 2. Agenda• Waterschap De Dommel• Uitdagingen• Open source• Architectuur• Take aways
  3. 3. BI bij De Dommel• BIC – Sinds 2004 – 2,0 FTE• Business Objects suite• Rapportages• Direct op de bron
  4. 4. Uitdagingen• Toenemende complexiteit – Meer aanbod (systemen) – Meer vraag – Complexere vraag• Beheersbaarheid• Leveranciersafhankelijkheid
  5. 5. Toenemende complexiteit
  6. 6. flickr.com/timmygunz/32108184
  7. 7. Toenemende complexiteitvraagkant flickr.com/hatm/3465628803aanbodkant
  8. 8. Toenemende complexiteit: beheersbaarheid complexiteit tijd Toenemende beheerslasten, druk op ontwikkeling
  9. 9. Leveranciersafhankelijkheid rapportage dashboards- business logica - business logica- integratie - integratie- business view - business view- transformaties - transformaties Dubbele bouw- en beheerslasten 
  10. 10. Ontvlechten
  11. 11. Ontvlechten Enterprise Data Warehouse (EDW)
  12. 12. Open source• Top down vs. Bottom up aanpak• Onze aanpak: – Eerst praktijkervaringen opdoen – Concrete problemen oplossen – Impuls voor beleid• Ondersteuning management belangrijk, innovativiteit• Redenen: – Leveranciersonafhankelijkheid – Ondersteuning los van product – Kosten
  13. 13. Terug naar het EDW Enterprise Data Warehouse (EDW)
  14. 14. Architectuur Rapportage Analyse Dashboards Vraag Data mart 1 Data mart n gestuurd Business Data Vault Source Data Vault 1 Source Data Vault 2 Source Data Vault n Aanbod Gegenereerd en geautomatiseerdn Staging 1 Staging 2 Staging gedreven Bron 1 Bron 2 Bron n
  15. 15. Hybride aanpak• Geen waterval aanpak• Begin met systemen ontsluiten – Aanbod gedreven• Start ondertussen informatie analyse – Bepaal vraag• Verbind vraag en aanbod in de Business Data Vault• Bouw data marts voor simpele ontsluiting
  16. 16. Hybride aanpakinspanning aanbod gedreven vraag gestuurd tijd
  17. 17. Hybride aanpak• Bouw Business Data Vault is eenvoudig – Data reeds in Data Vault vorm – Integratie op business key – Vertalen naar een bedrijfsgegevensmodel – Views bovenop Source Data Vaults• Bouw Data Marts is eenvoudig – Views bovenop Business Data Vault – Dimensie: hub + satelliet – Feit: link + satelliet
  18. 18. Hoge mate van automatisering• Staging gegenereerd• Source data vaults generereerd• Zowel structuur als laadroutines• Tools: – Quipu (beheren, genereren) – Pentaho Data Integration (uitvoeren) – Geïntegreerd
  19. 19. Ervaringscijfers release 1• Ontsloten systemen: 4• Investeringen: 0,- €• Interne capaciteit: 2x 0,3 FTE• Doorlooptijd tot eerste iteratie: 4 maanden• Momenteel loopt eerste ontsluitingsproject
  20. 20. Uitdagingen: toenemende complexiteit• Systeemoverschrijdende informatie – Integratie opgelost in bDV-laag• Nieuwe bronnen – Toevoegen (genereren) – Daarna bDV-laag uitbreiden
  21. 21. Uitdagingen: beheersbaarheid• Toevoegingen hebben geen fysieke impact op bestaande structuren in EDW• Het EDW is lineair uitbreidbaar; agile complexiteit tijd
  22. 22. Uitdagingen: leveranciersafhankelijkheid• Gelaagde architectuur, componenten• Componenten te vervangen• Nieuwe ontsluitingsvormen sluiten aan op bestaande data marts• Kiezen voor ‘best tool for the job’
  23. 23. Take aways• Beoordeel je BI architectuur ook op toekomstvastheid: flexibiliteit, uitbreidbaarheid, lock-in.• Het is mogelijk met lage begininvesteringen naar resultaat toe te werken dankzij automatisering  PoC?• Open source tools zoals Quipu: hoe meer users, hoe meer verbeteringen, goed voor iedereen!
  24. 24. Meer informatie• Blog: johannesvdb.blogspot.com• Twitter: @johannesvdb• Artikel DB/M 1-2011: Van spaghetti naar lasagne

×