CHI: evaluation

480 views

Published on

Published in: Education
  • Be the first to comment

  • Be the first to like this

CHI: evaluation

  1. 1. evaluatie van gebruikersinterfaces erik duval K.U.Leuven http://www.cs.kuleuven.be/~erikd 1 Wednesday 18 February 2009
  2. 2. 2 Wednesday 18 February 2009
  3. 3. http://www.slideshare.net/erik.duval Wednesday 18 February 2009 3
  4. 4. Criteria voor evaluatie • één handeling voor • consistentie meer functies • makkelijk aan te • maar 3 handels op leren 1 venster • gelijke • kans om fouten te functionaliteit maken, aantal en groeperen aard • snelheid om iets • feedback te doen • leeftijd: • duidelijk wat je terminologie aan het doen bent Wednesday 18 February 2009
  5. 5. ook... • meetbaar Wednesday 18 February 2009
  6. 6. Criteria voor evaluatie verband tussen wat je geen onnodige dingen ziet en wat je wil doen lage leertijd weinig clicks esthetisch uitzicht “platform-onafhankelijk” fouten opvangen & overzichtelijk ongedaan maken leesbaar - welke toestand? kleurcombinatie navigatie? consistentie Wednesday 18 February 2009
  7. 7. criteria • Usability • Usefulness • Meaning • (esthetic) Qualities • Sociability Wednesday 18 February 2009
  8. 8. Criteria Wednesday 18 February 2009
  9. 9. Criteria • Leertijd Wednesday 18 February 2009
  10. 10. Criteria • Leertijd • Tijd om taak uit te voeren Wednesday 18 February 2009
  11. 11. Criteria • Leertijd • Tijd om taak uit te voeren • Aantal en soort fouten Wednesday 18 February 2009
  12. 12. Criteria • Leertijd • Tijd om taak uit te voeren • Aantal en soort fouten • Tijd dat gebruikers zich herinneren hoe taken te volbrengen Wednesday 18 February 2009
  13. 13. Criteria • Leertijd • Tijd om taak uit te voeren • Aantal en soort fouten • Tijd dat gebruikers zich herinneren hoe taken te volbrengen • Subjectief gevoel van voldoening bij gebruikers Wednesday 18 February 2009
  14. 14. Criteria • Leertijd • Tijd om taak uit te voeren • Aantal en soort fouten • Tijd dat gebruikers zich herinneren hoe taken te volbrengen • Subjectief gevoel van voldoening bij gebruikers Vaak compromis nodig, explicitering belangrijk! Wednesday 18 February 2009
  15. 15. Factoren die invloed uitoefenen • afleiding (auto) • ervaren • interactie modus • taal, cultuur (geluid op • kennis acterliggend bouwwerf) systeem • vermoeidheid, • frekwentie comfort Wednesday 18 February 2009
  16. 16. Factoren die invloed uitoefenen • lichamelijke • scholing beperkingen • fysische omgeving • geslacht (onder water) • flexibiliteit • apple fans • reden waarom • intelligentie gebruikt • lichaamsbouw • grootte • hoe vaak gebruikt doelgroep Wednesday 18 February 2009
  17. 17. Factoren: Fysisch Wednesday 18 February 2009
  18. 18. Factoren: Fysisch •Ook zonder computers Wednesday 18 February 2009
  19. 19. Factoren: Fysisch •Ook zonder computers •Antropometrie Wednesday 18 February 2009
  20. 20. Factoren: Fysisch •Ook zonder computers •Antropometrie •Afmetingen arm, hand, vinger, hefkracht, enz. Wednesday 18 February 2009
  21. 21. Factoren: Fysisch •Ook zonder computers •Antropometrie •Afmetingen arm, hand, vinger, hefkracht, enz. •Aanpasbaar indien gebruikers te verschillend Wednesday 18 February 2009
  22. 22. Factoren: Fysisch •Ook zonder computers •Antropometrie •Afmetingen arm, hand, vinger, hefkracht, enz. •Aanpasbaar indien gebruikers te verschillend •vb. helderheid Wednesday 18 February 2009
  23. 23. Factoren: Fysisch •Ook zonder computers •Antropometrie •Afmetingen arm, hand, vinger, hefkracht, enz. •Aanpasbaar indien gebruikers te verschillend •vb. helderheid •Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor Wednesday 18 February 2009
  24. 24. Factoren: Fysisch •Ook zonder computers •Antropometrie •Afmetingen arm, hand, vinger, hefkracht, enz. •Aanpasbaar indien gebruikers te verschillend •vb. helderheid •Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor •Ergonomie: hoogte werkblad, beenruimte, hoek van leuning, verlichting, enz. Wednesday 18 February 2009
  25. 25. Factoren: Fysisch •Ook zonder computers •Antropometrie •Afmetingen arm, hand, vinger, hefkracht, enz. •Aanpasbaar indien gebruikers te verschillend •vb. helderheid •Zicht (perifeer en centraal, kleuren, enz.), tast, gehoor •Ergonomie: hoogte werkblad, beenruimte, hoek van leuning, verlichting, enz. •Lay-out van kantoor of leslokaal voor meer of minder interactie Wednesday 18 February 2009
  26. 26. Factoren: Cognitief Wednesday 18 February 2009
  27. 27. Factoren: Cognitief •Probleemoplossend vermogen Wednesday 18 February 2009
  28. 28. Factoren: Cognitief •Probleemoplossend vermogen •Geheugen (korte en lange termijn) Wednesday 18 February 2009
  29. 29. Factoren: Cognitief •Probleemoplossend vermogen •Geheugen (korte en lange termijn) •Concentratie Wednesday 18 February 2009
  30. 30. Factoren: Cognitief •Probleemoplossend vermogen •Geheugen (korte en lange termijn) •Concentratie •Beïnvloed door vermoeidheid, verveling, stress, angst, leeftijd, ... Wednesday 18 February 2009
  31. 31. Factoren: Cognitief •Probleemoplossend vermogen •Geheugen (korte en lange termijn) •Concentratie •Beïnvloed door vermoeidheid, verveling, stress, angst, leeftijd, ... •Intelligentie is meer omstreden Wednesday 18 February 2009
  32. 32. Factoren: Cognitief •Probleemoplossend vermogen •Geheugen (korte en lange termijn) •Concentratie •Beïnvloed door vermoeidheid, verveling, stress, angst, leeftijd, ... •Intelligentie is meer omstreden •Kennis van het domein en computerervaring Wednesday 18 February 2009
  33. 33. Factoren: Persoonlijkheid Wednesday 18 February 2009
  34. 34. Factoren: Persoonlijkheid •Assertief vs. passief Wednesday 18 February 2009
  35. 35. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers Wednesday 18 February 2009
  36. 36. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers •Grafisch versus tekst Wednesday 18 February 2009
  37. 37. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers •Grafisch versus tekst •Man versus vrouw ('abort') Wednesday 18 February 2009
  38. 38. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers •Grafisch versus tekst •Man versus vrouw ('abort') •Myers-Briggs Type Indicator (skepsis alert!) Wednesday 18 February 2009
  39. 39. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers •Grafisch versus tekst •Man versus vrouw ('abort') •Myers-Briggs Type Indicator (skepsis alert!) • Extrovert vs. introvert Wednesday 18 February 2009
  40. 40. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers •Grafisch versus tekst •Man versus vrouw ('abort') •Myers-Briggs Type Indicator (skepsis alert!) • Extrovert vs. introvert • Denken vs. intuitie Wednesday 18 February 2009
  41. 41. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers •Grafisch versus tekst •Man versus vrouw ('abort') •Myers-Briggs Type Indicator (skepsis alert!) • Extrovert vs. introvert • Denken vs. intuitie • Waarnemen vs. beoordelen Wednesday 18 February 2009
  42. 42. Factoren: Persoonlijkheid •Assertief vs. passief •Angst voor/verslaving aan computers •Grafisch versus tekst •Man versus vrouw ('abort') •Myers-Briggs Type Indicator (skepsis alert!) • Extrovert vs. introvert • Denken vs. intuitie • Waarnemen vs. beoordelen • Voelen vs. denken Wednesday 18 February 2009
  43. 43. Factoren: Cultureel •Klassiek Chinees: van rechts naar links, kolom per kolom ➪ scherm anders scannen •Belangrijker naarmate software universeler gebruikt wordt •Aanpasbaarheid aan taal, etiquette, enz. (ook iconen!) •Internationalisation & localisation •i18n Wednesday 18 February 2009
  44. 44. Trash can in Thailand Wednesday 18 February 2009
  45. 45. Trash can in Thailand Wednesday 18 February 2009
  46. 46. Evaluatie: planning Wednesday 18 February 2009
  47. 47. Evaluatie: planning •Fase in ontwikkeling Wednesday 18 February 2009
  48. 48. Evaluatie: planning •Fase in ontwikkeling •Ervaring met gelijkaardige projecten Wednesday 18 February 2009
  49. 49. Evaluatie: planning •Fase in ontwikkeling •Ervaring met gelijkaardige projecten •Verwacht aantal gebruikers Wednesday 18 February 2009
  50. 50. Evaluatie: planning •Fase in ontwikkeling •Ervaring met gelijkaardige projecten •Verwacht aantal gebruikers •Belang van toepassing Wednesday 18 February 2009
  51. 51. Evaluatie: planning •Fase in ontwikkeling •Ervaring met gelijkaardige projecten •Verwacht aantal gebruikers •Belang van toepassing •Kosten en budget Wednesday 18 February 2009
  52. 52. Evaluatie: planning •Fase in ontwikkeling •Ervaring met gelijkaardige projecten •Verwacht aantal gebruikers •Belang van toepassing •Kosten en budget •Beschikbare tijd Wednesday 18 February 2009
  53. 53. Evaluatie: planning •Fase in ontwikkeling •Ervaring met gelijkaardige projecten •Verwacht aantal gebruikers •Belang van toepassing •Kosten en budget •Beschikbare tijd •Op een bepaald moment moet natuurlijk wel opgeleverd worden! Wednesday 18 February 2009
  54. 54. Evaluatie-mogelijkheden Wednesday 18 February 2009
  55. 55. Evaluatie-mogelijkheden • Door experten Wednesday 18 February 2009
  56. 56. Evaluatie-mogelijkheden • Door experten • Usability engineering Wednesday 18 February 2009
  57. 57. Evaluatie-mogelijkheden • Door experten • Usability engineering • Enquete Wednesday 18 February 2009
  58. 58. Evaluatie-mogelijkheden • Door experten • Usability engineering • Enquete • Acceptatie-testen Wednesday 18 February 2009
  59. 59. Evaluatie-mogelijkheden • Door experten • Usability engineering • Enquete • Acceptatie-testen • Tijdens gebruik Wednesday 18 February 2009
  60. 60. Evaluatie door experten Wednesday 18 February 2009
  61. 61. Evaluatie door experten •Expertise: HCI of domein Wednesday 18 February 2009
  62. 62. Evaluatie door experten •Expertise: HCI of domein •Zeer effectief Wednesday 18 February 2009
  63. 63. Evaluatie door experten •Expertise: HCI of domein •Zeer effectief •Moment in ontwikkeling: vroeg of laat Wednesday 18 February 2009
  64. 64. Evaluatie door experten •Expertise: HCI of domein •Zeer effectief •Moment in ontwikkeling: vroeg of laat •Delicate relatie met ontwikkelaars Wednesday 18 February 2009
  65. 65. Evaluatie door experten •Expertise: HCI of domein •Zeer effectief •Moment in ontwikkeling: vroeg of laat •Delicate relatie met ontwikkelaars •Doel: Wednesday 18 February 2009
  66. 66. Evaluatie door experten •Expertise: HCI of domein •Zeer effectief •Moment in ontwikkeling: vroeg of laat •Delicate relatie met ontwikkelaars •Doel: •problemen identificeren Wednesday 18 February 2009
  67. 67. Evaluatie door experten •Expertise: HCI of domein •Zeer effectief •Moment in ontwikkeling: vroeg of laat •Delicate relatie met ontwikkelaars •Doel: •problemen identificeren •veranderingen voorstellen Wednesday 18 February 2009
  68. 68. Evaluatie door experten (2) •Richtlijnen: intern of extern •‘Cognitive walkthrough' •Typische gebruikers en taken •Formele inspectie •Woord en wederwoord •‘Bird's eye view‘ •schermafdrukken op grond of muur •Best 3 tot 5 experten Wednesday 18 February 2009
  69. 69. Usability engineering •Versus ‘wetenschappelijk’ experiment •Vergelijkende test van meerdere UI's •Benadrukt eerste gebruik •complementair met evaluatie door experten Wednesday 18 February 2009
  70. 70. http://www.cc.gatech.edu/gvu/images/lab/usability-lab.jpg Usability Lab Wednesday 18 February 2009
  71. 71. Usability engineering (2) •‘Think-aloud protocol‘ •Video-opnames met annotatie •Log, opmerkingen, enz. voor analyse •‘Discount usability engineering’ •‘Field test': •Realistisch (Win95: 400.000 pre-releases) •Papieren versie Wednesday 18 February 2009
  72. 72. Usability Engineering Na voor http://www.acm.org/interactions/vol2no1/feature/savage2.htm Wednesday 18 February 2009
  73. 73. Deelnemers • Moeten representatief zijn • Computerervaring, taal, taak, motivatie, opleiding, enz. • Ook fysisch: geslacht, ouderdom, enz. • Ook andere factoren: tijdstip, achtergrondgeluid, enz. • Moeten weten dat niet zij maar de gebruikersinterface beoordeeld wordt Wednesday 18 February 2009
  74. 74. Wednesday 18 February 2009
  75. 75. Dank! Wednesday 18 February 2009
  76. 76. Vragen? Dank! Wednesday 18 February 2009
  77. 77. Vragen? http://www.cs.kuleuven.ac.be/~erikd Dank! Wednesday 18 February 2009

×