SlideShare a Scribd company logo
1 of 18
Evaluatie invoering CS-EZIS
    in het UMC Utrecht



        dr Rob de Leeuw
           Bart Kuipers
Achtergrond studie



•   Juni 2011: CS-EZIS ingevoerd in het UMC Utrecht
•   Voordelen boven Mirador
•   Voorafgaand: training op maat door key-users
     • Training was verplicht


•   Literatuuronderzoek
•   Samenstelling lange en korte vragenlijst
     • Lange lijst voor key users
     • Korte lijst voor gebruikers
Vraagstelling



1. Voldeed de implementatiestrategie om CH-EZIS in te voeren op het
   UMC Utrecht voor key users en gebruikers?

2. Verandert het gedrag van professionals en patiënten als gevolg van de
   invoering van CH-EZIS?

3. Verandert het zorggebruik als gevolg van de invoering van CH-EZIS?
Achtergrond studie



05-2011     Nulmeting onder:
            Grote steekproef gebruikers (w.o. alle artsen)
            Alle key-users

10-2011 -   1e Vervolgmeting: vragenlijsten

04-2012 -   2e Vervolgmeting: vragenlijsten en focusgroepen

10-2012 -   3e Vervolgmeting : vragenlijsten

04-2013 -   4e Vervolgmeting : vragenlijstem

10-2013 -   5e Vervolgmeting : vragenlijsten en 3 focusgroepen
Meetinstrumenten


Online vragenlijst

Focusgroep interviews met:
    - Key-users
    - Gebruikers

Vragen over:
    - Ervaringen met CS-EZIS
    - Ervaren knelpunten bij implementatie en in gebruik
    - Suggesties voor verbetering
Respons


                               Gebruikers   Key-users

Aangeschreven                  2579         268

M1: Volledig ingevuld          985          101
Percentage volledig ingevuld   38%          38%

M2: Volledig ingevuld          954          86
Percentage volledig ingevuld   37%          34%

M3: Volledig ingevuld          724          76
Percentage volledig ingevuld   29%          31%
Respons


                              Gebruikers   Key-users

Geslacht
% man                         31,1%        16,2%

Opleiding
Voortgezet onderwijs           4,0%         5,1%
Middelbaar beroepsonderwijs   12,6%        33,8%
Hoger beroepsonderwijs        25,3%        45,6%
Wetenschappelijk onderwijs    58,1%        15,4%
Conceptueel model




    User                              System quality
    participation


                                                            System Use



    End-User        Psychological     Attitude toward the
    training        ownership of IT   system


                                                            User satisfaction



    Management
    support                           User involvement




    Conceptual Model (De Waal & Batenburg)
Gebruik Mirador en CS-EZIS


Gebruikers:
- 97% gebruikt Mirador voor 38% van hun werkzaamheden.
- De helft werkt ook nog met papieren dossier

-   CS-EZIS wordt 48% van hun werkzaamheden gebruikt.
-   Papier gebruik neemt af met 27% een half jaar na invoering


Key-users:
- 85% gebruikt Mirador voor 27% in hun werkzaamheden
- De helft werkt ook nog met papieren dossier

-   Gebruik van CS-EZIS: 60% van de werkzaamheden.
CS-EZIS: Verwachtingen en uitkomsten
users
Gebruikersvriendelijkheid



Meting 1: Mirador
- Logisch in gebruik en snelheid zijn aandachtspunten

-   Werken met Mirador wordt niet altijd als plezierig ervaren

-   Programma wordt ervaren als star en soms als irritant



Meting2: CS-EZIS
- Meest genoemde voordelen van CS-EZIS: sneller, meer informatie,
  betrouwbaarder en betere integratie van systemen.

-   Key-users meer tevreden over de snelheid, efficiëntie en bruikbaarheid
    van CS-EZIS vergeleken met gebruikers.

-   Aandachtspunten zijn overzichtelijkheid en aantal handelingen in
    CS-EZIS.
Gebruikersvriendelijkheid




Rapportcijfer   M1     M2    M3

Gebruikers:     6,4    6,4   6,4
Key-users:      6,8    7.2   7.3
Voorlopige Resultaten



Key users

                                             Mirador   CS-EZIS
Invloed op het werk                          2.70      2.70
Gebruikers tevredenheid                      2.91      2.93
Werkelijk gebruik (% van werkuren)           34%       63%*

Ervaren kwaliteit systeem                    2.59      2.68
Betrokkenheid gebruikers (7-punts schaal)    4.80      5.22*
Attitude naar het systeem (7-punts schaal)   4.87      5.62*
Voorlopige Resultaten
Conclusies



Mirador als systeem: niet heel negatief beoordeeld
- Duidelijk ruimte voor verbetering
- Hooggespannen verwachtingen



Invoering van CS-EZIS:
- Tevreden: 63% van de users, 83% van de key-users

-   64% wist wat de gevolgen van invoering waren op het werk
-   65% vond dat de invoering soepel verliep

-   Voor 50% verliep een week na invoering alles weer zo goed als
    normaal.
Conclusies



•   Invoering van CS-EZIS: succes!
     • Belangrijk bij invoering is dat de gebruiker centraal staat
     • Key-users: meer tevreden. Mogelijk door grotere betrokkenheid.


•   Betrokkenheid en tevredenheid van gebruikers invloed op acceptatie van
    CS-EZIS.

•   Grotere afhankelijkheid van het electronisch ZIS
Vervolg tot 2014




-   Steeds metingen om de 6 maanden
-   Verschillende functionaliteiten worden toegevoegd


Tussentijdse resultaten gebruikt voor:
- Aanpassing implementatiestrategie
- Verfijnen software applicaties
Vragen of opmerkingen…?




j.r.j.deleeuw@umcutrecht.nl

More Related Content

Viewers also liked

Management accounting, costing and budgeting
Management accounting, costing and budgetingManagement accounting, costing and budgeting
Management accounting, costing and budgetingHarizulhuda
 
парадигматическая морфология
парадигматическая морфологияпарадигматическая морфология
парадигматическая морфологияOlivo4ka
 
Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...
Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...
Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...highedwebne
 
Disasters and its management
Disasters and its managementDisasters and its management
Disasters and its managementThesmi Thomas
 
Skin microflora / Normal Flora of Skin
Skin microflora / Normal Flora of SkinSkin microflora / Normal Flora of Skin
Skin microflora / Normal Flora of SkinThesmi Thomas
 
Applications of Genetic Engineering
Applications of Genetic Engineering Applications of Genetic Engineering
Applications of Genetic Engineering Thesmi Thomas
 
Mughal art and architecture - Thesmi Thomas
Mughal art and architecture - Thesmi ThomasMughal art and architecture - Thesmi Thomas
Mughal art and architecture - Thesmi ThomasThesmi Thomas
 

Viewers also liked (9)

Management accounting, costing and budgeting
Management accounting, costing and budgetingManagement accounting, costing and budgeting
Management accounting, costing and budgeting
 
парадигматическая морфология
парадигматическая морфологияпарадигматическая морфология
парадигматическая морфология
 
E-commerce
E-commerceE-commerce
E-commerce
 
Adiwiyata
AdiwiyataAdiwiyata
Adiwiyata
 
Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...
Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...
Innovative Ideas Need An Innovation Process: Lessons Learned from the Harvard...
 
Disasters and its management
Disasters and its managementDisasters and its management
Disasters and its management
 
Skin microflora / Normal Flora of Skin
Skin microflora / Normal Flora of SkinSkin microflora / Normal Flora of Skin
Skin microflora / Normal Flora of Skin
 
Applications of Genetic Engineering
Applications of Genetic Engineering Applications of Genetic Engineering
Applications of Genetic Engineering
 
Mughal art and architecture - Thesmi Thomas
Mughal art and architecture - Thesmi ThomasMughal art and architecture - Thesmi Thomas
Mughal art and architecture - Thesmi Thomas
 

Similar to CS-EZIS evaluatie in the UMC Utrecht (15 juni 2012)

Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...
Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...
Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...HOlink
 
Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...
Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...
Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...HOlink
 
Verkorte Presentatie Promotie Versie 1.2.1
Verkorte Presentatie Promotie Versie 1.2.1Verkorte Presentatie Promotie Versie 1.2.1
Verkorte Presentatie Promotie Versie 1.2.1taalj
 
Voorstelling PWO iBit
Voorstelling PWO iBitVoorstelling PWO iBit
Voorstelling PWO iBitDavy Nijs
 
'Sturen op resultaten' Congres Transformeren doe je samen
'Sturen op resultaten' Congres Transformeren doe je samen'Sturen op resultaten' Congres Transformeren doe je samen
'Sturen op resultaten' Congres Transformeren doe je samenUtrecht
 
NETQ ROM For Monitoring Health
NETQ ROM For Monitoring HealthNETQ ROM For Monitoring Health
NETQ ROM For Monitoring HealthVincent Egt
 
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...SURF Events
 
De IT Regisseur - grip op IT met Integrated Service Management (ISM)
De IT Regisseur - grip op IT met Integrated Service Management (ISM)De IT Regisseur - grip op IT met Integrated Service Management (ISM)
De IT Regisseur - grip op IT met Integrated Service Management (ISM)De IT Regisseur B.V.
 
Koac artikel SWM 7 2015
Koac artikel SWM 7 2015Koac artikel SWM 7 2015
Koac artikel SWM 7 2015Peter Smulders
 
AVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, Antwerpen
AVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, AntwerpenAVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, Antwerpen
AVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, AntwerpenTOPdesk
 
SuccesStory Lunetzorg
SuccesStory LunetzorgSuccesStory Lunetzorg
SuccesStory LunetzorgThijn Jacobs
 
Oogst gauc universal analytics learnings - juni 2015 - martijn staal kevin laan
Oogst  gauc universal analytics learnings - juni 2015 - martijn staal kevin laanOogst  gauc universal analytics learnings - juni 2015 - martijn staal kevin laan
Oogst gauc universal analytics learnings - juni 2015 - martijn staal kevin laanOogst
 
Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...
Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...
Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...thierry_onkelinx
 
Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...
Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...
Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...Leon Chevalking
 
Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...
Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...
Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...HOlink
 
Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...
Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...
Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...HOlink
 

Similar to CS-EZIS evaluatie in the UMC Utrecht (15 juni 2012) (20)

Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...
Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...
Meer grip op nieuwe releases? Hoe blijf je bij? - Susanne Zuurendonk - HO-lin...
 
Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...
Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...
Maatwerk met standaardcomponenten - Gerrit Vooijs, Hans Janssen, Wouter de Br...
 
Verkorte Presentatie Promotie Versie 1.2.1
Verkorte Presentatie Promotie Versie 1.2.1Verkorte Presentatie Promotie Versie 1.2.1
Verkorte Presentatie Promotie Versie 1.2.1
 
Voorstelling PWO iBit
Voorstelling PWO iBitVoorstelling PWO iBit
Voorstelling PWO iBit
 
'Sturen op resultaten' Congres Transformeren doe je samen
'Sturen op resultaten' Congres Transformeren doe je samen'Sturen op resultaten' Congres Transformeren doe je samen
'Sturen op resultaten' Congres Transformeren doe je samen
 
Content hot topics scia engineer
Content hot topics scia engineerContent hot topics scia engineer
Content hot topics scia engineer
 
Webinar ISO 27001 informatiebeveiliging: revisie, certificering en implementa...
Webinar ISO 27001 informatiebeveiliging: revisie, certificering en implementa...Webinar ISO 27001 informatiebeveiliging: revisie, certificering en implementa...
Webinar ISO 27001 informatiebeveiliging: revisie, certificering en implementa...
 
Systems Engineering
Systems EngineeringSystems Engineering
Systems Engineering
 
NETQ ROM For Monitoring Health
NETQ ROM For Monitoring HealthNETQ ROM For Monitoring Health
NETQ ROM For Monitoring Health
 
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...
'Bouwstenen voor de toekomstige (digitale) leeromgeving' - Judith Zwerver-Ber...
 
111450
111450111450
111450
 
De IT Regisseur - grip op IT met Integrated Service Management (ISM)
De IT Regisseur - grip op IT met Integrated Service Management (ISM)De IT Regisseur - grip op IT met Integrated Service Management (ISM)
De IT Regisseur - grip op IT met Integrated Service Management (ISM)
 
Koac artikel SWM 7 2015
Koac artikel SWM 7 2015Koac artikel SWM 7 2015
Koac artikel SWM 7 2015
 
AVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, Antwerpen
AVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, AntwerpenAVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, Antwerpen
AVEVE Service delivery van de toekomst, TOPdesk on Tour 2016, Antwerpen
 
SuccesStory Lunetzorg
SuccesStory LunetzorgSuccesStory Lunetzorg
SuccesStory Lunetzorg
 
Oogst gauc universal analytics learnings - juni 2015 - martijn staal kevin laan
Oogst  gauc universal analytics learnings - juni 2015 - martijn staal kevin laanOogst  gauc universal analytics learnings - juni 2015 - martijn staal kevin laan
Oogst gauc universal analytics learnings - juni 2015 - martijn staal kevin laan
 
Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...
Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...
Ontwerp en evaluatie van meetnetten voor het milieu- en natuurbeleid: leidraa...
 
Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...
Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...
Onderzoek draagvlak ICT in verstandelijk gehandicaptenzorg (iCare Platformbij...
 
Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...
Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...
Meten en sturen studentendienstverlening - Pieter Rotteveel, José van Schie -...
 
Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...
Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...
Houd grip op kwaliteit, voer een regressietest uit! - John van der Molen - HO...
 

CS-EZIS evaluatie in the UMC Utrecht (15 juni 2012)

  • 1. Evaluatie invoering CS-EZIS in het UMC Utrecht dr Rob de Leeuw Bart Kuipers
  • 2. Achtergrond studie • Juni 2011: CS-EZIS ingevoerd in het UMC Utrecht • Voordelen boven Mirador • Voorafgaand: training op maat door key-users • Training was verplicht • Literatuuronderzoek • Samenstelling lange en korte vragenlijst • Lange lijst voor key users • Korte lijst voor gebruikers
  • 3. Vraagstelling 1. Voldeed de implementatiestrategie om CH-EZIS in te voeren op het UMC Utrecht voor key users en gebruikers? 2. Verandert het gedrag van professionals en patiënten als gevolg van de invoering van CH-EZIS? 3. Verandert het zorggebruik als gevolg van de invoering van CH-EZIS?
  • 4. Achtergrond studie 05-2011 Nulmeting onder: Grote steekproef gebruikers (w.o. alle artsen) Alle key-users 10-2011 - 1e Vervolgmeting: vragenlijsten 04-2012 - 2e Vervolgmeting: vragenlijsten en focusgroepen 10-2012 - 3e Vervolgmeting : vragenlijsten 04-2013 - 4e Vervolgmeting : vragenlijstem 10-2013 - 5e Vervolgmeting : vragenlijsten en 3 focusgroepen
  • 5. Meetinstrumenten Online vragenlijst Focusgroep interviews met: - Key-users - Gebruikers Vragen over: - Ervaringen met CS-EZIS - Ervaren knelpunten bij implementatie en in gebruik - Suggesties voor verbetering
  • 6. Respons Gebruikers Key-users Aangeschreven 2579 268 M1: Volledig ingevuld 985 101 Percentage volledig ingevuld 38% 38% M2: Volledig ingevuld 954 86 Percentage volledig ingevuld 37% 34% M3: Volledig ingevuld 724 76 Percentage volledig ingevuld 29% 31%
  • 7. Respons Gebruikers Key-users Geslacht % man 31,1% 16,2% Opleiding Voortgezet onderwijs 4,0% 5,1% Middelbaar beroepsonderwijs 12,6% 33,8% Hoger beroepsonderwijs 25,3% 45,6% Wetenschappelijk onderwijs 58,1% 15,4%
  • 8. Conceptueel model User System quality participation System Use End-User Psychological Attitude toward the training ownership of IT system User satisfaction Management support User involvement Conceptual Model (De Waal & Batenburg)
  • 9. Gebruik Mirador en CS-EZIS Gebruikers: - 97% gebruikt Mirador voor 38% van hun werkzaamheden. - De helft werkt ook nog met papieren dossier - CS-EZIS wordt 48% van hun werkzaamheden gebruikt. - Papier gebruik neemt af met 27% een half jaar na invoering Key-users: - 85% gebruikt Mirador voor 27% in hun werkzaamheden - De helft werkt ook nog met papieren dossier - Gebruik van CS-EZIS: 60% van de werkzaamheden.
  • 10. CS-EZIS: Verwachtingen en uitkomsten users
  • 11. Gebruikersvriendelijkheid Meting 1: Mirador - Logisch in gebruik en snelheid zijn aandachtspunten - Werken met Mirador wordt niet altijd als plezierig ervaren - Programma wordt ervaren als star en soms als irritant Meting2: CS-EZIS - Meest genoemde voordelen van CS-EZIS: sneller, meer informatie, betrouwbaarder en betere integratie van systemen. - Key-users meer tevreden over de snelheid, efficiëntie en bruikbaarheid van CS-EZIS vergeleken met gebruikers. - Aandachtspunten zijn overzichtelijkheid en aantal handelingen in CS-EZIS.
  • 12. Gebruikersvriendelijkheid Rapportcijfer M1 M2 M3 Gebruikers: 6,4 6,4 6,4 Key-users: 6,8 7.2 7.3
  • 13. Voorlopige Resultaten Key users Mirador CS-EZIS Invloed op het werk 2.70 2.70 Gebruikers tevredenheid 2.91 2.93 Werkelijk gebruik (% van werkuren) 34% 63%* Ervaren kwaliteit systeem 2.59 2.68 Betrokkenheid gebruikers (7-punts schaal) 4.80 5.22* Attitude naar het systeem (7-punts schaal) 4.87 5.62*
  • 15. Conclusies Mirador als systeem: niet heel negatief beoordeeld - Duidelijk ruimte voor verbetering - Hooggespannen verwachtingen Invoering van CS-EZIS: - Tevreden: 63% van de users, 83% van de key-users - 64% wist wat de gevolgen van invoering waren op het werk - 65% vond dat de invoering soepel verliep - Voor 50% verliep een week na invoering alles weer zo goed als normaal.
  • 16. Conclusies • Invoering van CS-EZIS: succes! • Belangrijk bij invoering is dat de gebruiker centraal staat • Key-users: meer tevreden. Mogelijk door grotere betrokkenheid. • Betrokkenheid en tevredenheid van gebruikers invloed op acceptatie van CS-EZIS. • Grotere afhankelijkheid van het electronisch ZIS
  • 17. Vervolg tot 2014 - Steeds metingen om de 6 maanden - Verschillende functionaliteiten worden toegevoegd Tussentijdse resultaten gebruikt voor: - Aanpassing implementatiestrategie - Verfijnen software applicaties