Context-gerelateerde support
Eesysoft/TU-Delft
Michel Visser (EesySoft) en Ellen Zillig-Straatman (TU Delft)
18-1-2012




          Delft
          University of
          Technology

          Challenge the future
Gebruikersonderzoek 2011
   • Wat wil de gebruiker!
   • Respons zonder promotie:
       • Docenten 104 enquetes
       • Studenten 664 enquetes

   • Handige functionaliteiten:
       •   Communicatie: Announcements/e-mails/…
       •   Informatievoorziening: Course Documents/…
       •   Enrollments
       •   My TimeTable (studenten)
   • Zwakke functionaliteiten
       • Gebruiksgemak
       • Snelheid
       • Overzicht


                                                       | 2
Blackboard algemeen - docenten
Handige
functionaliteiten
1e genoemd                         2e genoemd                          3e genoemd
Announcements /                    Announcements /                30   Course Information /
Communicatie / E-mail       50%    Communicatie / E-mail          %    Documents               18%
Course Information /               Course Information /           23
Documents                   21%    Documents                      %    Assignments             18%
                                                                  12   Announcements /
Overzicht                    7%    Groups / Enrollment            %    Communicatie / E-mail   16%
                                                                  10
Groups / Enrollment           6%   Bestanden uitwisselen          %    Groups / Enrollment     15%
Cijfers / Grades              5%   Assignments                   7%    Cijfers / Grades        10%
Anderen                    < 5%    Overzicht                     5%    Bestanden uitwisselen    6%
Zwakke functionaliteiten
1e genoemd                                      2e genoemd
Gebruiksgemak                        26%        Overzicht                            26%
Snelheid                             12%        Gebruiksgemak                        24%
Overzicht                            12%        peer- and selfassessment               5%
Cijfers/Grades                        8%        Bestanden uploaden/plaatsen            5%
Bestanden uploaden/plaatsen           5%        cijfers/grades                         5%
                                                Toetsen/surveys                        5%
                                                Anderen                            < 5%




                                                                                                     | 3
Blackboard algemeen - studenten

Handige
functionaliteiten
1e genoemd                         2e genoemd                      3e genoemd
Announcements /                    Announcements /                 Course Information /
Communicatie / E-mail       57%    Communicatie / E-mail     20%   Documents                22%
Course Information /               Course Information /            Announcements /
Documents                     9%   Documents                20%    Communicatie / E-mail    17%
Overzicht                     6%   My TimeTable             14%    My TimeTable             12%
My TimeTable                  6%   Osiris                     8%   Osiris                     7%
Anderen                    < 5%    Cijfers / Grades           6%   Cijfers / Grades           5%
                                   Overzicht                  6%   Software                   5%
                                   Anderen                 < 5%    Anderen                 < 5%
Zwakke functionaliteiten
1e genoemd                                      2e genoemd
Overzicht                            17%
Osiris                                9%
Snelheid                              8%
Announcements / Communicatie /
E-mail                                7%
Enrollment / Groups                   7%
Gebruiksgemak                         5%
Anderen                            < 5%         Anderen                          < 5%




                                                                                                   | 4
E-Learning Support (ELS)
                                                              Heb je dit studiejaar gebruik
  Heeft u dit collegejaar
                                                                   gemaakt van ELS?
gebruik gemaakt van ELS?

                                                                                               ja
                                    ja                                      13%
   18%
                                                                  41%                          nee
                                    nee
20%
                62%                                                          46%
                                                                                               niet van
                                    niet van
                                                                                               gehoord
                                    gehoord


                                  Waardering ELS 2008

                     0%   10%   20%      30%    40%    50%     60%    70%   80%   90%   100%

         Kwaliteit
         Snelheid
        Adequaat
 Training gevolgd

                           (zeer) goed tot neutraal   (zeer) slecht   nvt


                                  Waardering ELS 2010

                     0%   10%   20%      30%    40%    50%     60%    70%   80%   90%   100%

         Kwaliteit
         Snelheid
        Adequaat
 Training gevolgd

                           (zeer) goed tot neutraal   (zeer) slecht   nvt



                                                                                                          | 5
Blackboard Workshop
• Workshops worden slecht bezocht
• Docenten willen:
    • Korte instructies, instructies met speciale
      doelen of onderwerpen
    • Korte video instructies met goede zoekfunctie
    • Niet alleen workshops in augustus

Conclusie
Eesysoft zou hier een grote betekenis kunnen
hebben.




                                                      | 6
Overige resultaten

• Individuele wensen van de gebruiker.
    • Veel van de wensen van docenten en studenten zijn
      al mogelijk binnen Blackboard
• Waardering van de BB courses door studenten.
    • Het gebruik van een Blackboard Course waar meer
      dan alleen informatie wordt geplaatst, wordt positief
      beoordeeld.
    • Niet alle docenten kunnen even goed overweg met
      Blackboard.




                                                              | 7
EesySoft
Application Positioning System




                                 |
Uitdagingen

1.   Verdieping van het gebruik
2.   Beperkte training & support resources
3.   Weinig inzicht in het gebruik van Blackboard




                                                |
EesySoft Solution
TomTom voor Blackboard gebruikers

EesySoft’s Application Positioning System (APS) monitoort waar
gebruikers actief zijn in een applicatie (net als het GPS)
 Rapportages over de frequentie waarin bepaalde functionaliteit
  wordt gebruikt en door wie.
 Gebruikers kunnen context-gevoelige & pro-actieve support krijgen
  over zaken als:
    bekende problemen
    Veranderingen
    Nieuwe functionaliteit
    FAQ’s
    Ongebruikte functionaliteit




                                                             |
Demo overzicht
                                       Blackboard
                                         Users

Pro-actieve
informatie
                                                                     Context-gevoelige
Situatie:                                                            support
Bekende problemen,                      Expert/                      Situatie:
veranderingen, FAQ’s &                Peer-to-Peer   Info Pull &
                            Info Push                                ‘How to?’ vragen
ongebruikte                             Support      Feedback        van eindgebruikers
functionaliteit



                                      EesySoft APS

             Reporting &                                                 Content
            User Feedback                                          Management & Sharing

                                Plug-in free building block
                                 Installatie < 10 minutes

                                           Expert
 Application Manager                        Tools                         Experts

                             18 January 2012                        - Confidential - | 11
DEMO




       | 12
EINDE




        | 13

Nlbbug eesysoftv1.1

  • 1.
    Context-gerelateerde support Eesysoft/TU-Delft Michel Visser(EesySoft) en Ellen Zillig-Straatman (TU Delft) 18-1-2012 Delft University of Technology Challenge the future
  • 2.
    Gebruikersonderzoek 2011 • Wat wil de gebruiker! • Respons zonder promotie: • Docenten 104 enquetes • Studenten 664 enquetes • Handige functionaliteiten: • Communicatie: Announcements/e-mails/… • Informatievoorziening: Course Documents/… • Enrollments • My TimeTable (studenten) • Zwakke functionaliteiten • Gebruiksgemak • Snelheid • Overzicht | 2
  • 3.
    Blackboard algemeen -docenten Handige functionaliteiten 1e genoemd 2e genoemd 3e genoemd Announcements / Announcements / 30 Course Information / Communicatie / E-mail 50% Communicatie / E-mail % Documents 18% Course Information / Course Information / 23 Documents 21% Documents % Assignments 18% 12 Announcements / Overzicht 7% Groups / Enrollment % Communicatie / E-mail 16% 10 Groups / Enrollment 6% Bestanden uitwisselen % Groups / Enrollment 15% Cijfers / Grades 5% Assignments 7% Cijfers / Grades 10% Anderen < 5% Overzicht 5% Bestanden uitwisselen 6% Zwakke functionaliteiten 1e genoemd 2e genoemd Gebruiksgemak 26% Overzicht 26% Snelheid 12% Gebruiksgemak 24% Overzicht 12% peer- and selfassessment 5% Cijfers/Grades 8% Bestanden uploaden/plaatsen 5% Bestanden uploaden/plaatsen 5% cijfers/grades 5% Toetsen/surveys 5% Anderen < 5% | 3
  • 4.
    Blackboard algemeen -studenten Handige functionaliteiten 1e genoemd 2e genoemd 3e genoemd Announcements / Announcements / Course Information / Communicatie / E-mail 57% Communicatie / E-mail 20% Documents 22% Course Information / Course Information / Announcements / Documents 9% Documents 20% Communicatie / E-mail 17% Overzicht 6% My TimeTable 14% My TimeTable 12% My TimeTable 6% Osiris 8% Osiris 7% Anderen < 5% Cijfers / Grades 6% Cijfers / Grades 5% Overzicht 6% Software 5% Anderen < 5% Anderen < 5% Zwakke functionaliteiten 1e genoemd 2e genoemd Overzicht 17% Osiris 9% Snelheid 8% Announcements / Communicatie / E-mail 7% Enrollment / Groups 7% Gebruiksgemak 5% Anderen < 5% Anderen < 5% | 4
  • 5.
    E-Learning Support (ELS) Heb je dit studiejaar gebruik Heeft u dit collegejaar gemaakt van ELS? gebruik gemaakt van ELS? ja ja 13% 18% 41% nee nee 20% 62% 46% niet van niet van gehoord gehoord Waardering ELS 2008 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100% Kwaliteit Snelheid Adequaat Training gevolgd (zeer) goed tot neutraal (zeer) slecht nvt Waardering ELS 2010 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100% Kwaliteit Snelheid Adequaat Training gevolgd (zeer) goed tot neutraal (zeer) slecht nvt | 5
  • 6.
    Blackboard Workshop • Workshopsworden slecht bezocht • Docenten willen: • Korte instructies, instructies met speciale doelen of onderwerpen • Korte video instructies met goede zoekfunctie • Niet alleen workshops in augustus Conclusie Eesysoft zou hier een grote betekenis kunnen hebben. | 6
  • 7.
    Overige resultaten • Individuelewensen van de gebruiker. • Veel van de wensen van docenten en studenten zijn al mogelijk binnen Blackboard • Waardering van de BB courses door studenten. • Het gebruik van een Blackboard Course waar meer dan alleen informatie wordt geplaatst, wordt positief beoordeeld. • Niet alle docenten kunnen even goed overweg met Blackboard. | 7
  • 8.
  • 9.
    Uitdagingen 1. Verdieping van het gebruik 2. Beperkte training & support resources 3. Weinig inzicht in het gebruik van Blackboard |
  • 10.
    EesySoft Solution TomTom voorBlackboard gebruikers EesySoft’s Application Positioning System (APS) monitoort waar gebruikers actief zijn in een applicatie (net als het GPS)  Rapportages over de frequentie waarin bepaalde functionaliteit wordt gebruikt en door wie.  Gebruikers kunnen context-gevoelige & pro-actieve support krijgen over zaken als:  bekende problemen  Veranderingen  Nieuwe functionaliteit  FAQ’s  Ongebruikte functionaliteit |
  • 11.
    Demo overzicht Blackboard Users Pro-actieve informatie Context-gevoelige Situatie: support Bekende problemen, Expert/ Situatie: veranderingen, FAQ’s & Peer-to-Peer Info Pull & Info Push ‘How to?’ vragen ongebruikte Support Feedback van eindgebruikers functionaliteit EesySoft APS Reporting & Content User Feedback Management & Sharing Plug-in free building block Installatie < 10 minutes Expert Application Manager Tools Experts 18 January 2012 - Confidential - | 11
  • 12.
    DEMO | 12
  • 13.
    EINDE | 13

Editor's Notes

  • #10 Veel gebruikers kampen met deze 3 uitdagingen. 2 weken geleden was ik in de UK en daar hebben gebruikers precies hetzelfde probleem. Ad 1) Veel functionaliteit maar slechts klein deel wordt benut. Gebruikers weten niet dat het kan of weten niet hoe het werkt. Dit was reeds een thema tijdens een usergroup bijeenkomst in Amsterdam. Ad 2) Nieuwe releases, toenemend aantal gebruikers. Veel van beschikbare supportmateriaal wordt niet gebruikt omdat het buiten de context van het gebruik wordt aangeboden en vaak in verschillende systemen (help, Blackboard help, etc.). Workshops worden niet bezocht. Ad 3) Wie doet wat. Er kan veel met google analytics of data van Blackboard zelf. Maar het belangrijkste is dat je na de analyse van het gebruik ook direct actie kan ondernemen en dan moet je weten wie wat wel en niet gebruikt.