IT Consultancy Group bv
Friesestraatweg 215
9743 AD Groningen

ITCG

Harald Kikkers
ha.kikkers@itcg.nl

Brondata als enabl...
BI, altijd lastig?!

ITCG

Big ENTERPRISE
Big LOGIC
Big DATA
Brondata als enabler van Agile BI

2
Big ENTERPRISE

ITCG

• Vertrager…
– Te hoge kosten (?)
– Te lange doorlooptijd (?)
– Te hoge risico’s (?)

• Versneller…
...
AGILE!

ITCG

• Doel
– Sneller, beter, goedkoper,…
– Opheffen nadelen conventionele aanpakken
• ‘waterval’  gaat uit van ...
Kennis en ervaring…
•
•
•
•
•
•
•
•
•
•
•
•
•
•

ITCG

BI
SQL
Databases
Data analyse
Data kwaliteit
Data modellering
Infor...
Big ENTERPRISE

ITCG

Agile
aanpak

Brondata als enabler van Agile BI

6
“One down, two to go!”

ITCG

Big ENTERPRISE
Big LOGIC
Big DATA
Brondata als enabler van Agile BI

7
Big LOGIC

ITCG

• Vertrager…
– Structuur en semantiek van data
– Data-kwaliteit, normering en regels
– Mapping-/transform...
Toepassing tools in BI

ITCG

Data Warehouse

laad
&
check

mapping

Bron
Modellen

Referentie
Model

Data
Marts

check

m...
ETL-tools in BI

ITCG

Data Warehouse

ETL
laad
&
check

mapping
Voordelen:
• Basisfunctionaliteiten (stage, hist, map, QA...
Analyse-tools in BI

ITCG

Data Warehouse

Analyse
laad
&
check

Voordelen:
• Kennis integratie  borging  generatie
Bron...
BI-tools

ITCG

Kennis…
• Analyseren (statistiek, profiling)
• Vastleggen (repositorie)
• Ontsluiten (browsen, visualisati...
BI-tool screen shots…

Brondata als enabler van Agile BI

ITCG

13
BI-tool screen shots…

Brondata als enabler van Agile BI

ITCG

14
BI-tool screen shots…

Brondata als enabler van Agile BI

ITCG

15
BI-tool screen shots…

Brondata als enabler van Agile BI

ITCG

16
Big LOGIC

ITCG

BI
tools

Brondata als enabler van Agile BI

17
“Two down, one to go!”

ITCG

Big ENTERPRISE
Big LOGIC
Big DATA
Brondata als enabler van Agile BI

18
Big DATA

ITCG

• Vertrager…
– Testsets te groot
– Testsets niet specifiek
– Testsets bevatten ‘gevoelige’ data

• Versnel...
Toepassing subsetting in BI

ITCG

Data Warehouse

Subsetting
laad
&
check

mapping
Voordelen:
Bron
Referentie
• Kleine se...
Subsetting screen shots…

Brondata als enabler van Agile BI

ITCG

21
Subsetting screen shots…

Brondata als enabler van Agile BI

ITCG

22
Subsetting screen shots…

Brondata als enabler van Agile BI

ITCG

23
Toepassing anonimisering in BI

ITCG

Data Warehouse

Anonimisering
laad
&
check

Voordelen:
Bron
Referentie
• Anoniem = v...
Anonimisering screen shots…

Brondata als enabler van Agile BI

ITCG

25
Anonimisering screen shots…

Brondata als enabler van Agile BI

ITCG

26
“Touchdown!”

ITCG

Big ENTERPRISE
Big LOGIC
Big DATA
Brondata als enabler van Agile BI

27
Big DATA

ITCG

TDM
tools

Brondata als enabler van Agile BI

28
Conclusie

ITCG

• Big ENTERPRISE
 AGILE methode

• Big LOGIC
 Data analyse & ETL-tooling

• Big DATA
 Testdata managem...
Afsluiting

ITCG

• Vragen…?

• … en anders op onze stand
– Kennismaken
– Demo’s
• DATPROF Integrate
• DATPROF Subset
• DA...
Upcoming SlideShare
Loading in …5
×

ITCG - brondata als enabler van agile bi - Harald Kikkers

330 views

Published on

0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
330
On SlideShare
0
From Embeds
0
Number of Embeds
2
Actions
Shares
0
Downloads
6
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide

ITCG - brondata als enabler van agile bi - Harald Kikkers

  1. 1. IT Consultancy Group bv Friesestraatweg 215 9743 AD Groningen ITCG Harald Kikkers ha.kikkers@itcg.nl Brondata als enabler van Agile BI
  2. 2. BI, altijd lastig?! ITCG Big ENTERPRISE Big LOGIC Big DATA Brondata als enabler van Agile BI 2
  3. 3. Big ENTERPRISE ITCG • Vertrager… – Te hoge kosten (?) – Te lange doorlooptijd (?) – Te hoge risico’s (?) • Versneller… – Big ENTERPRISE  AGILE! • Big LOGIC (?)  Kennis, technologie • Big DATA (?)  Volume, semantiek, kwaliteit, veiligheid Brondata als enabler van Agile BI 3
  4. 4. AGILE! ITCG • Doel – Sneller, beter, goedkoper,… – Opheffen nadelen conventionele aanpakken • ‘waterval’  gaat uit van ‘fixed target’, volledige spec • Agile  ‘specifying by doing’ • Een continuproces – Kleine teams, multidisciplinair, betrokkenheid gebruikers – Korte iteraties (‘Sprints’)  snelle feedback  bijsturen – Nauwe samenwerking business en ICT Organisatie! Brondata als enabler van Agile BI 4
  5. 5. Kennis en ervaring… • • • • • • • • • • • • • • ITCG BI SQL Databases Data analyse Data kwaliteit Data modellering Informatie analyse Performance tuning Project management Materie-deskundigheid Informatie management Technische infrastructuren Modellering datalogistieke processen Etc, etc, etc, etc, etc, etc, etc, etc, etc, etc, … Brondata als enabler van Agile BI 5
  6. 6. Big ENTERPRISE ITCG Agile aanpak Brondata als enabler van Agile BI 6
  7. 7. “One down, two to go!” ITCG Big ENTERPRISE Big LOGIC Big DATA Brondata als enabler van Agile BI 7
  8. 8. Big LOGIC ITCG • Vertrager… – Structuur en semantiek van data – Data-kwaliteit, normering en regels – Mapping-/transformatie • Versneller… – Meta-data repositories – Standaard architectuur – BI tools • • • • • Meta data repositories (Bron-)data analyse ETL (transformatie, mapping) Code generatoren Runtime framework Brondata als enabler van Agile BI 8
  9. 9. Toepassing tools in BI ITCG Data Warehouse laad & check mapping Bron Modellen Referentie Model Data Marts check mapping Bronnen Extracties (GLO) DQ regels Uitval Brondata als enabler van Agile BI Map regels Audit DQ regels Uitval Map regels Audit 9
  10. 10. ETL-tools in BI ITCG Data Warehouse ETL laad & check mapping Voordelen: • Basisfunctionaliteiten (stage, hist, map, QA) Bron Referentie Modellen Model • Kennisborging  generatie Voorwaarden: mapping • Meta-data management (?) Data Marts check Bronnen Extracties (GLO) DQ regels Uitval Brondata als enabler van Agile BI Map regels Audit DQ regels Uitval Map regels Audit 10
  11. 11. Analyse-tools in BI ITCG Data Warehouse Analyse laad & check Voordelen: • Kennis integratie  borging  generatie Bron Referentie Modellen mapping Model Voorwaarden: • Modellerenmapping meta-data (?) check • Formuleren & normeren kwaliteit (?) Data Marts Bronnen Extracties (GLO) DQ regels Uitval Brondata als enabler van Agile BI Map regels Audit DQ regels Uitval Map regels Audit 11
  12. 12. BI-tools ITCG Kennis… • Analyseren (statistiek, profiling) • Vastleggen (repositorie) • Ontsluiten (browsen, visualisatie) • Onderhouden (editors) • Automatiseren (generatoren) Managen van kennis (meta–data) Automatiseren oplossing (generatie en operatie) Brondata als enabler van Agile BI 12
  13. 13. BI-tool screen shots… Brondata als enabler van Agile BI ITCG 13
  14. 14. BI-tool screen shots… Brondata als enabler van Agile BI ITCG 14
  15. 15. BI-tool screen shots… Brondata als enabler van Agile BI ITCG 15
  16. 16. BI-tool screen shots… Brondata als enabler van Agile BI ITCG 16
  17. 17. Big LOGIC ITCG BI tools Brondata als enabler van Agile BI 17
  18. 18. “Two down, one to go!” ITCG Big ENTERPRISE Big LOGIC Big DATA Brondata als enabler van Agile BI 18
  19. 19. Big DATA ITCG • Vertrager… – Testsets te groot – Testsets niet specifiek – Testsets bevatten ‘gevoelige’ data • Versneller… – Kleinere testsets – Specifieke testsets – Anonimisering Brondata als enabler van Agile BI Test Data Management tools! 19
  20. 20. Toepassing subsetting in BI ITCG Data Warehouse Subsetting laad & check mapping Voordelen: Bron Referentie • Kleine sets = snel testen Modellen Model • Kleine sets = veilig (minder ‘gevoelige’ data) Data Marts check Voorwaarden:mapping • Flexibiliteit m.b.t. selectie-criteria (?) • Over de keten heen (?) • Technisch vs. functioneel consistent (?) Bronnen Extracties (GLO) DQ regels Uitval Brondata als enabler van Agile BI Map regels Audit DQ regels Uitval Map regels Audit 20
  21. 21. Subsetting screen shots… Brondata als enabler van Agile BI ITCG 21
  22. 22. Subsetting screen shots… Brondata als enabler van Agile BI ITCG 22
  23. 23. Subsetting screen shots… Brondata als enabler van Agile BI ITCG 23
  24. 24. Toepassing anonimisering in BI ITCG Data Warehouse Anonimisering laad & check Voordelen: Bron Referentie • Anoniem = veilig (WbP, concurrentie) Modellen mapping Model Voorwaarden: mapping • Bepalen risico-klasse (?) check • Specificatie anonimiseringsregels (?) • Pseudonimiseren of anonimisering (?) Bronnen Extracties (GLO) DQ regels Uitval Brondata als enabler van Agile BI Map regels Audit DQ regels Uitval Map regels Data Marts Audit 24
  25. 25. Anonimisering screen shots… Brondata als enabler van Agile BI ITCG 25
  26. 26. Anonimisering screen shots… Brondata als enabler van Agile BI ITCG 26
  27. 27. “Touchdown!” ITCG Big ENTERPRISE Big LOGIC Big DATA Brondata als enabler van Agile BI 27
  28. 28. Big DATA ITCG TDM tools Brondata als enabler van Agile BI 28
  29. 29. Conclusie ITCG • Big ENTERPRISE  AGILE methode • Big LOGIC  Data analyse & ETL-tooling • Big DATA  Testdata management tooling • Subsetting • Anonimisering Brondata als enabler van Agile BI 29
  30. 30. Afsluiting ITCG • Vragen…? • … en anders op onze stand – Kennismaken – Demo’s • DATPROF Integrate • DATPROF Subset • DATPROF Privacy Brondata als enabler van Agile BI 30

×